OpenAI har avduket Sora, en AI-modell for konvertering av tekst til video.
OpenAI
OpenAI har lansert en ny videogenereringsmodell kalt Sora, som kan lage realistiske og fantasifulle videoer på opptil ett minutt ut fra en tekstbeskrivelse.
Dette er hva vi vet
Ifølge OpenAI skaper Sora komplekse scener med flere figurer ved å plassere objekter og figurer nøyaktig i bildet. Modellen er også i stand til å generere ulike typer bevegelser.
Vi presenterer Sora, vår tekst-til-videomodell.
- OpenAI (@OpenAI) 15. februar 2024
Sora kan lage videoer på opptil 60 sekunder med svært detaljerte scener, komplekse kamerabevegelser og flere karakterer med levende følelser. https://t.co/7j2JN27M3W
Prompt: "Vakker, snødekt... pic.twitter.com/ruTEWn87vf
Utviklerne fremhever AI-ens evne til å detaljere bakgrunner, enkeltobjekter og karakterer. Dessuten kan den generere ansikter med fargerike og varierte følelser.
Oppfordring: "En filmtrailer med eventyrene til en 30 år gammel romfarer iført en motorsykkelhjelm i rød ullstrikk, blå himmel, saltørken, filmatisk stil, filmet på 35 mm film, levende farger." pic.twitter.com/0JzpwPUGPB
- OpenAI (@OpenAI) 15. februar 2024
Oppfordring: "Flere gigantiske ullmammuter kommer gående gjennom en snødekt eng, den lange ullpelsen deres blåser lett i vinden mens de går, snødekte trær og dramatiske snødekte fjell i det fjerne, ettermiddagslys med svevende skyer og en sol høyt i det fjerne... pic.twitter.com/Um5CWI18nS
- OpenAI (@OpenAI) 15. februar 2024
OpenAI hevder at modellen deres har en viss "forståelse" av de fysiske lovene i den virkelige verden. Noen ganger er det imidlertid vanskelig å skape komplekse scener og årsakssammenhenger.
I tillegg til å syntetisere videoer fra bunnen av, kan Sora forbedre og utvide eksisterende videoer. Det er i stand til å fylle inn manglende bilder i en bildesekvens.
Sora er foreløpig bare tilgjengelig for "red teamers" som evaluerer modellen for potensielle skader og risikoer. OpenAI har også gitt tilgang til noen billedkunstnere, designere og filmskapere for å få tilbakemeldinger.
Kilde: OpenAI