У Sony есть прототип ИИ версии Элой из Horizon, которая может разговаривать с человеком в реальном времени

Sony имеет прототип ИИ-версии Элой, главной героини серии Horizon, демонстрируя возможности искусственного интеллекта в создании интерактивных персонажей. Прототип способен вести разговоры, реагировать на запросы и даже взаимодействовать с игровым миром.

Что известно

В видео, которое было опубликовано на YouTube, директор по инженерии Sony Шарвин Рагхубарджал показал, как ИИ Элой может отвечать на вопросы и взаимодействовать с игроком. Например, она рассказывает о своем сюжете в серии Horizon.

ИИ Элой также демонстрирует возможность "переносить" игрока в виртуальный мир игры. В видео она сопровождает Рагхубарджала в поселение The Scalding Spear из Horizon Forbidden West, описывая его особенности.

Sony использует передовые технологии для создания ИИ Элой. Для обработки речи применяются OpenAI Whisper (speech-to-text) и GPT-4/Llama 3 для диалогов и принятия решений. Голос генерируется с помощью собственной системы Sony Emotional Voice Synthesis (EVS), а анимация лица - через технологию Mockingbird.

Видео было удалено с YouTube из-за жалобы на авторские права от Muso TNT Ltd., компании, занимающейся защитой контента. Причина удаления остается неясной, но есть предположение, что видео могло быть утечкой внутренних материалов Sony.

Однако на сайте The Verge сохранилась гифка с ИИ версией Элой.

Источник: The Verge