Adobe presenterte et imponerende AI-assistert videoskaleringsprosjekt

Adobe-forskere har utviklet en ny generativ kunstig intelligensmodell, VideoGigaGAN, som kan skalere uskarp video opp til åtte ganger den opprinnelige oppløsningen.

Dette er hva vi vet

Adobe hevder at VideoGigaGAN utkonkurrerer andre metoder for oppskalering av video med superoppløsning (VSR), og leverer mer detaljerte resultater uten uønskede AI-induserte artefakter.

Tradisjonelt sett er generative adversarial networks (GAN) effektive for skalering av stillbilder til høy oppløsning. De har imidlertid problemer med video, der de skaper flimmer og andre feil. Alternative metoder unngår dette, men gir ikke samme høye kvalitet.

VideoGigaGAN tar sikte på å kombinere de beste aspektene - GAN-resultater av høy kvalitet med minimale problemer med artefakter i utdatarammene. Adobe har gitt flere eksempler på hvordan teknologien fungerer.

Dopis vid @luokai

Gå tilbake til trådene

Noen fine detaljer i demovideoen, som hudtekstur og folder, ser ut til å være fullstendig generert, men generelt ser resultatene naturlige ut. Det er vanskelig å si om oppløsningen er forbedret med generativ AI, noe som reiser spørsmål om hva slags foto- og videoinnhold det er snakk om.

Foreløpig er VideoGigaGAN fortsatt et forskningsprosjekt, og det er uvisst om Adobe vil innlemme teknologien i sine produkter som Premiere Pro. Tidligere har selskapet annonsert et annet diffusjonsbasert eksperiment for oppløsningsforbedring, Project Res-Up.

Kilde: The Verge The Verge