OpenAI stellt Sora vor, ein KI-Modell für die Umwandlung von Text in Video
OpenAI
OpenAI hat ein neues Videogenerierungsmodell namens Sora angekündigt, das aus einer Textbeschreibung realistische und fantasievolle Videos von bis zu einer Minute Länge erstellen kann.
Was bekannt ist
Laut OpenAI erstellt Sora komplexe mehrfigurige Szenen, indem es Objekte und Figuren präzise im Bild platziert. Das Modell ist auch in der Lage, verschiedene Arten von Bewegungen zu erzeugen.
Wir stellen Sora vor, unser Text-zu-Video-Modell.
- OpenAI (@OpenAI) February 15, 2024
Sora kann Videos von bis zu 60 Sekunden Länge erstellen, die hochdetaillierte Szenen, komplexe Kamerabewegungen und mehrere Charaktere mit lebhaften Emotionen enthalten. https://t.co/7j2JN27M3W
Aufforderung: "Schön, verschneit... pic.twitter.com/ruTEWn87vf
Die Entwickler wiesen auf die Fähigkeit der KI hin, Hintergründe, einzelne Objekte und Charaktere detailliert darzustellen. Außerdem kann sie Charaktergesichter mit bunten und vielfältigen Emotionen erzeugen.
Aufforderung: "Ein Filmtrailer mit den Abenteuern des 30-jährigen Weltraummannes, der einen roten Wollstrick-Motorradhelm trägt, blauer Himmel, Salzwüste, filmischer Stil, gedreht auf 35-mm-Film, lebhafte Farben." pic.twitter.com/0JzpwPUGPB
- OpenAI (@OpenAI) February 15, 2024
Prompt: "Mehrere riesige Wollmammuts nähern sich über eine schneebedeckte Wiese, ihr langes wolliges Fell weht leicht im Wind, während sie gehen, schneebedeckte Bäume und dramatische schneebedeckte Berge in der Ferne, Nachmittagslicht mit dünnen Wolken und eine Sonne hoch in der Ferne... pic.twitter.com/Um5CWI18nS
- OpenAI (@OpenAI) February 15, 2024
OpenAI behauptet, dass ihr Modell ein gewisses "Verständnis" für die physikalischen Gesetze der realen Welt hat. Allerdings gibt es manchmal Schwierigkeiten bei der Erstellung komplexer Szenen und Ursache-Wirkungs-Beziehungen.
Sora kann nicht nur Videos von Grund auf neu synthetisieren, sondern auch bestehende Videos verfeinern und erweitern. Es ist in der Lage, fehlende Bilder in einer Bildsequenz zu ergänzen.
Sora steht derzeit nur "Red Teamern" zur Verfügung, die das Modell auf potenzielle Schäden und Risiken hin bewerten. OpenAI hat auch einigen bildenden Künstlern, Designern und Filmemachern den Zugang eröffnet, um Feedback zu erhalten.
Quelle: OpenAI