Метод обучения

Pop2Talk позволяет детям учиться в своем собственном темпе и вовлекает их в игривую учебную среду в виде игры в лунный камень.

Игроки выскакивают лунные камни. В попсе они слышат примерное произношение целевого слова. После нескольких попыток игроку показывают значение слова на картинке и просят повторить слово. Произношение игрока оценивается вычислительно, а звезды вручаются в качестве награды. Эти звезды измеряют уровень владения произношением. Время от времени игрок должен произнести слово, не услышав образец. Это усиливает обучение, а также измеряет изучение словарного запаса.

Метод Pop2Talk регулирует соотношение слуха и произношения слов и использует обратную связь и игровые элементы, чтобы заинтересовать ребенка.

Произношение это первый шаг ...

... или, если быть более точным, это второе. Сначала нужно услышать пример произношения. Услышь и скажи, услышь и скажи. Повторите достаточно много раз, и в итоге вы получите правильные звуки. Тогда вы сможете произносить слова, которые вы знаете, так, чтобы их понимали другие, и на этом основании вы можете начать произносить предложения.

Изучение новых звуков

Произношение - это не только лингвистический навык. Это также моторный навык, немного похожий на гимнастику или жонглирование. Требуются многочисленные попытки овладеть контролем вашего голосового тракта для нового звучания. Когда вы впервые слышите звук, которого нет ни на одном из известных вам языков, ваш мозг даже не замечает, что он новый. Умение распознавать, слушая и повторять, говоря медленно, развивается вместе и позволяет постепенно выучить новый звук.

Требуются время и усилие, чтобы представления звука сформировались в вашем мозгу. Эти изменения в сенсорно-моторной kore golovnogo mozga очень малы, но они говорят, когда изучающий язык способен различать неправильное и правильное произношение, независимо от того, является ли он своим собственным или кем-то другим.

 

Pop2Talk появился в годы исследований в Университете Хельсинки и Университете Аалто. Pop2Talk основан на сочетании исследований мозга, образовательной науки и речевых технологий. Из измерений мозга испытуемых, играющих в наши игры по изучению языка, мы можем определить, какое количество повторений обычно требуется для изучения новых звуков.

Вероятность отзыва в зависимости от числа разговорных повторений слова в исследовании игры Pop2Talk. У игроков значительно возросла способность запоминать произнесенные слова после определенного количества повторений. Номера будут опубликованы Ylinen & al. (рукопись готовится).

Игра держит ребенка вложенным

Слушая образец снова и снова и произнося одно и то же слово бесконечное количество раз, вы почувствуете себя не в своей тарелке. Вам нужно будет озаглавить слово сотни раз и повторить его несколько десятков раз, чтобы сформировать устойчивое представление о нем в вашем мозгу.

Многим маленьким детям трудно сосредоточиться на таком количестве работы. Игровая среда может нарушить монотонность повторения, предоставляя захватывающую и полезную побочную задачу.


Настраивая сложность игры, тщательно подбирая слова и полезную кривую обучения, игрок может испытывать удовлетворяющее чувство мастерства, а также восхитительное чувство вызова.

Как ИИ может помочь в изучении произношения?

Оценка произношения в игре Pop2Talk обеспечивается нашей собственной системой анализа речи, основанной на современных алгоритмах машинного обучения.

Детские голоса имеют большее разнообразие в стиле речи, высокую вариабельность тона и размера голосового тракта и, таким образом, представляют собой проблему для распознавания речи, даже когда они говорят на своем родном языке. Изменяя наш подход к распознаванию речи, мы сделали нашу технологию хорошо работающей для детей, изучающих новые языки.

От распознавания речи до распознавания произношения

Распознаватели стандартной речи пытаются определить, что говорил говорящий, независимо от того, как это было сказано. Мы пересмотрели проблему: мы знаем, что хочет сказать игрок, и поэтому мы можем сосредоточить свои усилия на выявлении ошибок произношения. Наша оценка основана на выявленных ошибках. Статистика ошибок может быть составлена для отчета преподавателю.