OpenAI onthult Sora, een AI-model voor het omzetten van tekst naar video

OpenAI heeft een nieuw model voor het genereren van video's aangekondigd, Sora genaamd, dat realistische en fantasie video's tot een minuut lang kan maken op basis van een tekstbeschrijving.

Dit is wat we weten

Volgens OpenAI creëert Sora complexe scènes met meerdere figuren door objecten en personages nauwkeurig in het frame te plaatsen. Het model kan ook verschillende soorten bewegingen genereren.

De ontwikkelaars merkten op dat de AI in staat is om achtergronden, individuele objecten en personages te detailleren. Bovendien kan het gezichten van personages genereren met kleurrijke en gevarieerde emoties.

OpenAI beweert dat hun model een zeker "begrip" heeft van de fysieke wetten van de echte wereld. Er zijn echter soms moeilijkheden bij het creëren van complexe scènes en oorzaak-en-gevolgrelaties.

Naast het synthetiseren van video's vanuit het niets, kan Sora bestaande video's verfijnen en uitbreiden. Het is in staat om ontbrekende frames in een beeldsequentie aan te vullen.

Sora is momenteel alleen beschikbaar voor "red teamers" die het model evalueren op mogelijke schade en risico's. OpenAI heeft ook enkele visuele kunstenaars, ontwerpers en filmmakers toegang gegeven om feedback te krijgen.

Bron: OpenAI