Розробники вашингтонського університету створили ШІ-навушники з чипом Apple М2, які перекладають мовлення кількох спікерів зі збереженням голосових особливостей

Команда розробників із Вашингтонського університету (University of Washington) представила концепт інноваційних навушників, які можуть змінити міжнаціональне спілкування, зробивши його комфортнішим і природнішим.

Що відомо

Інженери вбудували чип M2 від Apple і бінауральний мікрофон Sonic Presence SP15C у корпус від навушників Sony WH-1000XM4. Це рішення дало змогу пристрою використовувати ШІ для синхронного перекладу мови зі збереженням голосових особливостей кількох спікерів і напрямку звуку.

Навушники перекладають з іспанської, німецької або французької мов з ідеальною точністю, і на обробку звуку йде 2-4 секунди. Технологія адаптує гучність звуку залежно від відстані до спікера. Весь процес здійснюється локально із забезпеченням повної конфіденційності.

Такі навушники можуть знайти застосування в онлайн-конференціях, у навчальних програмах і в звичайному спілкуванні з іноземцями.

Творці визнають, що затримка перекладу на 2-4 секунди може ускладнити діалог, але з розвитком технологій цей недолік напевно буде усунуто.

Код проєкту перебуває у вільному доступі та відкритий для розробників.

Джерело: Sigchi