ElevenLabs a créé un service d'IA pour le clonage de voix et le doublage de vidéos en 20 langues.
Jacek Dylag/Unsplash
La startup ElevenLabs a mis au point un service basé sur l'intelligence artificielle qui permet de doubler des vidéos en 20 langues tout en préservant les voix des acteurs.
Ce que nous savons
ElevenLabs est une startup qui propose un service de clonage de voix utilisant l'intelligence artificielle à partir d'échantillons audio téléchargés. La nouvelle fonction de duplication fait essentiellement la même chose : elle analyse le discours des acteurs d'une vidéo et clone leur voix. L'intelligence artificielle génère ensuite une nouvelle piste audio dans la langue sélectionnée, dans le même style.
L'outil prend en charge plus de 20 langues, dont l'hindi, le portugais, l'espagnol, le japonais, l'ukrainien, le polonais et l'arabe.
Selon l'entreprise, l'outil est conçu pour les sociétés de médias, les éducateurs et les créateurs de contenu. Toutefois, ils doivent obtenir l'autorisation des détenteurs de droits d'auteur pour créer des doublages.
ElevenLabs affirme que le système sera non seulement capable de traduire le contenu, mais aussi de générer de nouveaux dialogues dans la langue cible en utilisant la voix de l'acteur. Le système est également capable de mémoriser les émotions et les intonations.
Source : ElevenLabs