Представлені навушники SonicASL, що переводять мову жестів в мову

Дослідницька група під керівництвом учених з Університету Буффало модифікувала гарнітуру з системою шумозаглушення, що дозволило електронного пристрою "бачити" і переводити мову жестів у парі зі смартфоном.

Система, що отримала назву SonicASL, показала ефективність 93,8% в тестах, проведених в приміщенні і на вулиці і включали 42 слова. Приклади використовуваної лексики: "любов", "космос" і "камера". У тих же умовах, з використанням 30 простих речень - наприклад, "Приємно познайомитися" - SonicASL показав ефективність 90,6%.

Необхідно виконати ще багато роботи, перш ніж технологія зможе вийти на ринок в якості комерційного продукту, підкреслили дослідники. Наприклад, необхідно значно розширити словниковий запас SonicASL. Крім того, система повинна вміти читати міміку, що є важливим компонентом мови жестів.

Дослідники мають намір продовжувати роботу над створенням системи. Їх основний мотив полягає в тому, що в світі налічується більше 72 мільйонів людей з порушеннями слуху. Всі вони відчувають труднощі в спілкуванні з іншими людьми. Завдання дуже складне, тому що глухі люди в усьому світі мають справу з більш ніж 300 різними мовами жестів.

За словами дослідників, у винаході використовується доплеровская технологія, що дозволяє "відчувати" крихітні коливання або відлуння в акустичних хвилях, що створюються рухом руки. Результати дослідження будуть представлені на конференції ACM Conference on Ubiquitous Computing (UbiComp), яка пройде з 21 по 26 вересня.

джерело: acm.org, buffalo.edu