Słuchawki SonicASL, które tłumaczą język migowy na mowę, zostały zaprezentowane

Autor: Yuriy Stanislavskiy | 18.09.2021, 16:03
Słuchawki SonicASL, które tłumaczą język migowy na mowę, zostały zaprezentowane

Zespół badawczy kierowany przez naukowców z Uniwersytetu w Buffalo zmodyfikował zestaw słuchawkowy z redukcją szumów, który pozwala urządzeniu elektronicznemu "widzieć" i tłumaczyć język migowy po sparowaniu ze smartfonem.

System, nazwany SonicASL, osiągnął wynik 93,8% w testach przeprowadzonych w pomieszczeniach i na zewnątrz, obejmujących 42 słowa. Przykłady użytego słownictwa to "miłość", "przestrzeń" i "aparat fotograficzny". W tych samych warunkach, używając 30 prostych zdań - np. "Miło mi cię poznać" - SonicASL wykazał się skutecznością 90,6%.

Zanim technologia ta wejdzie na rynek jako produkt komercyjny, trzeba jeszcze sporo popracować, podkreślają naukowcy. Na przykład, słownictwo SonicASL musi zostać znacznie rozszerzone. Ponadto system musi być w stanie odczytywać mimikę twarzy, co jest ważnym elementem języka migowego.

Naukowcy zamierzają kontynuować prace nad systemem. Ich głównym motywem jest fakt, że na świecie jest ponad 72 miliony osób niedosłyszących. Wszyscy oni mają problemy z porozumiewaniem się z resztą świata. Zadanie to jest bardzo trudne, ponieważ osoby niesłyszące na całym świecie mają do czynienia z ponad 300 różnymi językami migowymi.

Według naukowców, wynalazek wykorzystuje technologię Dopplera do "wyczuwania" drobnych wibracji lub echa w falach akustycznych tworzonych przez ruch ręki. Badania te zostaną zaprezentowane na konferencji ACM Conference on Ubiquitous Computing (UbiComp), która odbędzie się w dniach 21-26 września.

Źródło: acm.orgbuffalo.edu