Fugatto: NVIDIA lanserer et kraftig generativt videoverktøy

NVIDIA har introdusert Fugatto (Foundational Generative Audio Transformer Opus 1), en universell generativ AI-modell som er i stand til å skape og transformere musikk, stemmer og lyder basert på tekst- eller lydforespørsler. Selskapet kalte utviklingen en "sveitsisk lommekniv for lyd".

Dette er hva vi vet

Fugatto er unik ved at den kombinerer funksjoner som tidligere ble utført av separate modeller. Den er i stand til å utføre komplekse oppgaver som f.eks:

• Generere musikk fra tekst: Modellen kan for eksempel lage en "melankolsk pianokomposisjon med en lett jazzrytme".
• Transformasjon av lyd: Du kan endre instrumentet i en sang, for eksempel gjøre en gitar om til en cello eller legge til trommer i en eksisterende melodi.
• Stemmemodifikasjon: Modellen kan justere den emosjonelle tonen i stemmen din eller til og med endre aksentene.
• En spesiell egenskap ved Fugatto er muligheten til å syntetisere lyder som ennå ikke har eksistert. Den kan for eksempel skape en unik lyd som passer til en bestemt film eller et bestemt spill.

Hvorfor det er viktig

NVIDIAs utvikling setter nye standarder for generativ kunstig intelligens innen lyd. Med Fugatto får kreative fagfolk et verktøy som ikke bare automatiserer rutineprosesser, men som også gir uendelige muligheter for kreativitet. Fugattos evne til å tilpasse seg mange ulike scenarier betyr at modellen i fremtiden vil kunne finne anvendelse på områder der lyd er avgjørende, fra reklame til utdanningsprogrammer.

Denne teknologien bekrefter også trenden med at AI-modeller beveger seg mot multitasking. Tidligere var det nødvendig med separate modeller for ulike oppgaver, men nå viser Fugatto at multifunksjonelle løsninger ikke bare er mulig, men også effektive.

Hva ligger bak ordet Fugatto?

Det kommer selvsagt fra ordet "fuga". En fuge er en musikalsk form og komposisjonsteknikk som kjennetegnes av en polyfon struktur, der ett eller flere temaer (melodier) gjentas og utvikles i forskjellige stemmer. Begrepet er avledet av det latinske ordet fuga, som betyr "løp" eller "flukt", noe som gjenspeiler ideen om at et tema "løper" fra én stemme til en annen. Fugaen ble en sentral sjanger i barokkmusikken, særlig takket være komponister som Johann Sebastian Bach, som regnes som en av de største mesterne i denne sjangeren.

Ordet "fugatto" (italiensk: fugato) betyr en polyfon musikalsk form som er beslektet med fugaen. Fugatto har sin opprinnelse i verk med streng stil og omfatter en imitasjonsteknikk der ett eller flere temaer gjentas og utvikles i forskjellige stemmer.

Kilde: blogs.nvidia.com