Нейроинтерфейс с искусственным интеллектом помог парализованной женщине говорить с помощью аватара

Исследователи помогли парализованной женщине заговорить с помощью цифрового аватара и алгоритмов искусственного интеллекта, которые анализируют ее мозговые волны и преобразуют их в речь.

Что известно

Пациентка, назвавшаяся Энн (Ann), может двигать лицевыми мышцами, но не может говорить. Ученые обучили рекуррентную нейронную сеть преобразовывать сигналы ее мозга в 39 различных фонем — звуковых единиц, которые объединяются в слова при разговоре. 

Мозговые волны Энн измерялись с помощью интерфейса "мозг-компьютер". После обучения модель смогла декодировать ее мысли в фонемы, которые произносил цифровой аватар на экране.

Энн может говорить через своего цифрового аватара со скоростью 62 слова в минуту, что примерно на 40% быстрее обычной речи. Коэффициент ошибок в словах составляет 23,8% при словарном запасе системы в 125 000 слов.

Технологию разработала группа ученых-компьютерщиков из Калифорнийского университета в Сан-Франциско и Калифорнийского университета в Беркли. Они надеются, что исследование приведет к созданию одобренного регулирующими органами устройства, чтобы парализованные люди могли выражать свои мысли.

Источник: The Register