OpenAI onthult Sora, een AI-model voor het omzetten van tekst naar video
OpenAI
OpenAI heeft een nieuw model voor het genereren van video's aangekondigd, Sora genaamd, dat realistische en fantasie video's tot een minuut lang kan maken op basis van een tekstbeschrijving.
Dit is wat we weten
Volgens OpenAI creëert Sora complexe scènes met meerdere figuren door objecten en personages nauwkeurig in het frame te plaatsen. Het model kan ook verschillende soorten bewegingen genereren.
Maak kennis met Sora, ons tekst-naar-videomodel.
- OpenAI (@OpenAI) 15 februari 2024
Sora kan video's van maximaal 60 seconden maken met zeer gedetailleerde scènes, complexe camerabewegingen en meerdere personages met levendige emoties. https://t.co/7j2JN27M3W
Prompt: "Mooi, besneeuwd... pic.twitter.com/ruTEWn87vf
De ontwikkelaars merkten op dat de AI in staat is om achtergronden, individuele objecten en personages te detailleren. Bovendien kan het gezichten van personages genereren met kleurrijke en gevarieerde emoties.
Prompt: "Een filmtrailer met de avonturen van de 30-jarige ruimtevaarder met een rood wollen gebreide motorhelm, blauwe lucht, zoutwoestijn, filmische stijl, opgenomen op 35mm-film, levendige kleuren." pic.twitter.com/0JzpwPUGPB
- OpenAI (@OpenAI) 15 februari 2024
Prompt: "Verschillende reusachtige wollige mammoeten naderen terwijl ze door een besneeuwde weide lopen, hun lange wollige vacht waait lichtjes in de wind terwijl ze lopen, besneeuwde bomen en dramatische bergen met sneeuwtoppen in de verte, licht halverwege de middag met pluizige wolken en een zon hoog in de verte... pic.twitter.com/Um5CWI18nS
- OpenAI (@OpenAI) 15 februari 2024
OpenAI beweert dat hun model een zeker "begrip" heeft van de fysieke wetten van de echte wereld. Er zijn echter soms moeilijkheden bij het creëren van complexe scènes en oorzaak-en-gevolgrelaties.
Naast het synthetiseren van video's vanuit het niets, kan Sora bestaande video's verfijnen en uitbreiden. Het is in staat om ontbrekende frames in een beeldsequentie aan te vullen.
Sora is momenteel alleen beschikbaar voor "red teamers" die het model evalueren op mogelijke schade en risico's. OpenAI heeft ook enkele visuele kunstenaars, ontwerpers en filmmakers toegang gegeven om feedback te krijgen.
Bron: OpenAI
