Meta heeft AudioCraft's AI geluids- en liedgenerator vrijgegeven en de broncode geopend

Via: Bohdan Kaminskyi | 03.08.2023, 12:59
Meta heeft AudioCraft's AI geluids- en liedgenerator vrijgegeven en de broncode geopend

Meta heeft AudioCraft uitgebracht, een open-source AI-tool dat muziek en geluiden genereert uit tekstuele aanwijzingen.

Dit is wat we weten

AudioCraft bestaat uit drie AI-modellen die elk verschillende problemen met het genereren van geluid oplossen:

  • MusicGen maakt muziek. Het is getraind op 20.000 uur muziek die eigendom is van Meta of speciaal voor dit doel is gelicentieerd;
  • AudioGen genereert geluiden door blaffende honden of voetstappen te imiteren. Het model is getraind op opnames die op openbare plaatsen zijn verzameld;
  • Met de EnCodec-decoder kunnen geluiden worden gemaakt met minder artefacten.

Meta gelooft dat AudioCraft de potentie heeft om een nieuwe golf van songs te ontketenen, vergelijkbaar met de manier waarop synthesizers ooit muziek veranderden. Het bedrijf heeft ook de broncode van de tool opengesteld om de gegevens die gebruikt worden om de tool te trainen te diversifiëren.

Op de website van het project kun je luisteren naar voorbeelden van de muziek en geluiden die AudioCraft heeft gemaakt. De broncode van de tool is beschikbaar op GitHub.

Bron: Meta AI