Разработчики вашингтонского университета создали ИИ-наушники с чипом Apple М2, которые переводят речь нескольких спикеров с сохранением голосовых особенностей

Команда разработчиков из Вашингтонского университета (University of Washington) представила концепт инновационных наушников, которые могут изменить межнациональное общение, сделав его более комфортным и естественным.

Что известно

Инженеры встроили чип M2 от Apple и бинауральный микрофон Sonic Presence SP15C в корпус от наушников Sony WH-1000XM4. Это решение позволило устройству использовать ИИ для синхронного перевода речи с сохранением голосовых особенностей нескольких спикеров и направления звука.

Наушники переводят с испанского, немецкого или французского языков с идеальной точностью и на обработку звука уходит 2-4 секунды. Технология адаптирует громкость звука в зависимости от расстояния до спикера. Весь процесс осуществляется локально с обеспечением полной конфиденциальности.

Такие наушники могут найти применение в онлайн-конференциях, в обучающих программах и в обычном общении с иностранцами.

Создатели признают, что задержка перевода на 2-4 секунды может затруднить диалог, но с развитием технологий этой недостаток наверняка будет устранен.

Код проекта находится в свободном доступе и открыт для разработчиков.

Источник: Sigchi