Fugatto: NVIDIA onthult krachtig generatief videotool

Via: Anry Sergeev | 25.11.2024, 19:05

NVIDIA heeft Fugatto (Foundational Generative Audio Transformer Opus 1) geïntroduceerd, een universeel generatief AI-model dat muziek, stemmen en geluiden kan maken en transformeren op basis van tekst of audioverzoeken. Het bedrijf noemde de ontwikkeling een "Zwitsers zakmes voor geluid".


Video: NVIDIA Fugatto demonstratie

Dit is wat we weten

Fugatto is uniek omdat het de mogelijkheden combineert die voorheen door afzonderlijke modellen werden uitgevoerd. Het is in staat om complexe taken uit te voeren zoals:

  • Muziek genereren uit tekst: Het model kan bijvoorbeeld een "melancholische pianocompositie met een licht jazzritme" maken.
  • Geluidstransformatie: Je kunt het instrument in een nummer veranderen, bijvoorbeeld een gitaar veranderen in een cello of drums toevoegen aan een bestaande melodie.
  • Stemverandering: Het model kan de emotionele toon van je stem aanpassen of zelfs de accenten veranderen.
  • Een speciale functie van Fugatto is de mogelijkheid om geluiden te synthetiseren die nog niet bestonden. Het kan bijvoorbeeld een uniek geluid creëren dat past bij een bepaalde film of game.

Waarom het belangrijk is

NVIDIA's ontwikkeling zet een nieuwe standaard voor generatieve AI in audio. Met Fugatto krijgen creatieve professionals een tool die niet alleen routineprocessen automatiseert, maar ook eindeloze mogelijkheden biedt voor creativiteit. Het vermogen van Fugatto om zich aan te passen aan vele scenario's betekent dat het model in de toekomst toepassingen zou kunnen vinden in gebieden waar audio cruciaal is, van reclame tot educatieve programma's.

Deze technologie bevestigt ook de trend dat AI-modellen steeds meer multitasken. Voorheen waren er aparte modellen nodig voor verschillende taken, maar nu laat Fugatto zien dat multifunctionele oplossingen niet alleen mogelijk, maar ook effectief zijn.

Wat zit er achter het woord Fugatto?

Het komt natuurlijk van het woord "fuga". Een fuga is een muzikale vorm en compositietechniek die wordt gekenmerkt door een polyfone structuur, waarbij een of meer thema's (melodieën) worden herhaald en ontwikkeld in verschillende stemmen. De term is afgeleid van het Latijnse woord fuga, dat "lopen" of "ontsnappen" betekent, wat het idee weergeeft dat een thema van de ene stem naar de andere "loopt". De fuga werd een centraal genre in de barokmuziek, vooral dankzij componisten als Johann Sebastian Bach, die wordt beschouwd als een van de grootste meesters van dit genre.

Het woord "fugatto" (Italiaans: fugato) betekent een polyfone muzikale vorm die verwant is aan de fuga. Fugatto ontstond in werken met een strenge stijl en omvat een imitatietechniek waarbij een of meer thema's worden herhaald en ontwikkeld in verschillende stemmen.

Bron: blogs.nvidia.com