Нейроінтерфейс зі штучним інтелектом допоміг паралізованій жінці говорити за допомогою аватара

Дослідники допомогли паралізованій жінці заговорити за допомогою цифрового аватара та алгоритмів штучного інтелекту, які аналізують її мозкові хвилі та перетворюють їх на мову.

Що відомо

Пацієнтка, яку назвали Енн (Ann), може рухати лицьовими м'язами, але не може говорити. Науковці навчили рекурентну нейронну мережу перетворювати сигнали її мозку на 39 різних фонем - звукових одиниць, які об'єднуються в слова під час розмови.

Мозкові хвилі Енн вимірювали за допомогою інтерфейсу "мозок-комп'ютер". Після навчання модель змогла декодувати її думки у фонеми, які вимовляв цифровий аватар на екрані.

Енн може говорити через свого цифрового аватара зі швидкістю 62 слова на хвилину, що приблизно на 40% швидше за звичайну мову. Коефіцієнт помилок у словах становить 23,8% за словникового запасу системи у 125 000 слів.

Технологію розробила група вчених-комп'ютерників з Каліфорнійського університету в Сан-Франциско і Каліфорнійського університету в Берклі. Вони сподіваються, що дослідження призведе до створення схваленого регулювальними органами пристрою, щоб паралізовані люди могли висловлювати свої думки.

Джерело: The Register