ElevenLabs ha creato un servizio di AI per la clonazione vocale e il doppiaggio video in 20 lingue

Jacek Dylag/Unsplash

La startup ElevenLabs ha sviluppato un servizio basato sull'intelligenza artificiale in grado di doppiare video in 20 lingue preservando la voce dei doppiatori.

Ecco cosa sappiamo

ElevenLabs è una startup che offre un servizio di clonazione della voce utilizzando l'intelligenza artificiale sulla base di campioni audio caricati. La nuova funzione di duplicazione fa essenzialmente la stessa cosa: analizza il parlato degli attori di un video e ne clona la voce. L'intelligenza artificiale genera quindi una nuova traccia audio nella lingua selezionata con lo stesso stile.

Lo strumento supporta più di 20 lingue, tra cui hindi, portoghese, spagnolo, giapponese, ucraino, polacco e arabo.

Secondo l'azienda, lo strumento è pensato per le aziende del settore dei media, gli educatori e i creatori di contenuti. Tuttavia, per creare il doppiaggio è necessario avere l'autorizzazione dei titolari dei diritti d'autore.

ElevenLabs sostiene che il sistema non solo sarà in grado di tradurre i contenuti, ma anche di generare nuovi dialoghi nella lingua di destinazione utilizzando la voce dell'attore. Il sistema è anche in grado di memorizzare emozioni e intonazioni.

Fonte: ElevenLabs