Meta a publié le générateur de sons et de chansons AI d'AudioCraft et ouvert son code source.

Meta a publié AudioCraft, un outil d'IA open-source qui génère de la musique et des sons à partir d'indices textuels.

Voici ce que nous savons

AudioCraft se compose de trois modèles d'IA, chacun résolvant différents problèmes de génération de sons :

• MusicGen crée de la musique. Il a été entraîné sur 20 000 heures de musique appartenant à Meta ou concédée sous licence à cette fin ;
• AudioGen génère des sons en imitant des chiens qui aboient ou des bruits de pas. Le modèle a été entraîné sur des enregistrements recueillis dans des lieux publics ;
• le décodeur EnCodec permet de créer des sons avec moins d'artefacts.

Meta pense qu'AudioCraft a le potentiel de déclencher une nouvelle vague de chansons, de la même manière que les synthétiseurs ont changé la musique. L'entreprise a également ouvert le code source de l'outil afin de diversifier les données utilisées pour l'entraîner.

Vous pouvez écouter des échantillons de la musique et des sons créés par AudioCraft sur le site web du projet. Le code source de l'outil est disponible sur GitHub.

Source : Meta AI