Sony a mis au point un prototype de l'IA Eloy de Horizon, capable de parler aux humains en temps réel.

Sony a mis au point un prototype d'Eloy, le protagoniste de la série Horizon, qui démontre les capacités de l'intelligence artificielle à créer des personnages interactifs. Le prototype est capable de tenir des conversations, de répondre à des demandes et même d'interagir avec le monde du jeu.

Voici ce que nous savons

Dans une vidéo publiée sur YouTube, Sharvin Raghubarjal, directeur de l'ingénierie chez Sony, montre comment l'IA Eloy peut répondre à des questions et interagir avec le joueur. Par exemple, elle raconte son histoire dans la série Horizon.

L'IA Eloi démontre également sa capacité à "transporter" le joueur dans le monde virtuel du jeu. Dans la vidéo, elle accompagne Raghubarjal jusqu'à la colonie de The Scalding Spear dans Horizon Forbidden West, en décrivant ses caractéristiques.

Sony utilise des technologies avancées pour créer l'IA d'Eloy. OpenAI Whisper (speech-to-text) est utilisé pour le traitement de la parole et GPT-4/Llama 3 pour les dialogues et la prise de décision. La voix est générée à l'aide du système Emotional Voice Synthesis (EVS) de Sony, et l'animation faciale est générée à l'aide de la technologie Mockingbird.

La vidéo a été retirée de YouTube à la suite d'une plainte pour violation des droits d'auteur déposée par Muso TNT Ltd, une société de protection du contenu. La raison de ce retrait n'est pas claire, mais certains pensent qu'il s'agit d'une fuite de documents internes de Sony.

Cependant, le site web The Verge propose un gif avec une version IA d'Eloy.

Source : The Verge The Verge