Meta ha publicado el generador de sonidos y canciones AI de AudioCraft y ha abierto su código fuente

Por: Bohdan Kaminskyi | 03.08.2023, 12:59
Meta ha publicado el generador de sonidos y canciones AI de AudioCraft y ha abierto su código fuente

Meta ha lanzado AudioCraft, una herramienta de IA de código abierto que genera música y sonidos a partir de pistas textuales.

Esto es lo que sabemos

AudioCraft consta de tres modelos de IA, cada uno de los cuales resuelve diferentes problemas de generación de sonido:

  • MusicGen crea música. Se ha entrenado con 20.000 horas de música propiedad de Meta o licenciada específicamente para este fin;
  • AudioGen genera sonidos imitando ladridos de perros o pasos. El modelo se ha entrenado con grabaciones recogidas en lugares públicos;
  • el descodificador EnCodec permite crear sonidos con menos artefactos.

Meta cree que AudioCraft tiene el potencial de provocar una nueva ola de canciones, similar a la forma en que los sintetizadores cambiaron la música en su día. La empresa también ha abierto el código fuente de la herramienta para diversificar los datos utilizados para entrenarla.

En el sitio web del proyecto se pueden escuchar muestras de la música y los sonidos creados por AudioCraft. El código fuente de la herramienta está disponible en GitHub.

Fuente: Meta AI