ElevenLabs ha creado un servicio de IA para clonación de voz y doblaje de vídeo en 20 idiomas

La startup ElevenLabs ha desarrollado un servicio basado en inteligencia artificial que puede doblar vídeos en 20 idiomas conservando la voz de los actores.

Esto es lo que sabemos

ElevenLabs es una startup que ofrece un servicio de clonación de voces mediante inteligencia artificial basado en muestras de audio que se le suben. La nueva función de duplicación hace esencialmente lo mismo: analiza el habla de los actores de un vídeo y clona sus voces. A continuación, la IA genera una nueva pista de audio en el idioma seleccionado con el mismo estilo.

La herramienta es compatible con más de 20 idiomas, entre ellos el hindi, el portugués, el español, el japonés, el ucraniano, el polaco y el árabe.

Según la empresa, la herramienta está pensada para empresas de comunicación, educadores y creadores de contenidos. Sin embargo, necesitan el permiso de los titulares de los derechos de autor para crear doblajes.

ElevenLabs afirma que el sistema no sólo es capaz de traducir contenidos, sino también de generar nuevos diálogos en el idioma de destino utilizando la propia voz del actor. El sistema también es capaz de almacenar emociones y entonaciones.

Fuente: ElevenLabs