OpenAI представила Sora - модель ШІ для перетворення тексту у відео
OpenAI
Компанія OpenAI анонсувала нову модель генерації відео під назвою Sora, яка може створювати реалістичні та фантазійні ролики довжиною до хвилини за текстовим описом.
Що відомо
За словами OpenAI, Sora створює складні багатофігурні сцени, точно розташовує об'єкти та персонажів у кадрі. Модель також здатна генерувати різні типи рухів.
Представляємо Sora, нашу text-to-video модель.
- OpenAI (@OpenAI) February 15, 2024
Sora може створювати відео тривалістю до 60 секунд, у яких є високодеталізовані сцени, складні рухи камери та багато персонажів із яскравими емоціями. https://t.co/7j2JN27M3W
Промпт: "Красивий, сніговий... pic.twitter.com/ruTEWn87vf
Розробники відзначили здатність ШІ деталізувати фон, окремі предмети та персонажів. Ба більше, вона може генерувати обличчя героїв із яскравими та різноманітними емоціями.
Підказка: "Кінотрейлер із пригодами 30-річного космічного чоловіка в червоному вовняному в'язаному мотоциклетному шоломі, блакитне небо, соляна пустеля, кінематографічний стиль, знятий на 35-міліметровій плівці, яскраві кольори". pic.twitter.com/0JzpwPUGPB
- OpenAI (@OpenAI) 15 лютого 2024 року
Підказка: "Кілька гігантських вовняних мамонтів наближаються, крокуючи по засніженій галявині, їхнє довге вовняне хутро ледь-ледь розвівається вітром під час їхньої прогулянки, засніжені дерева та драматичні засніжені гори вдалечині, післяполуденне світло в середині дня, з легкими хмарами, і високо високо вдалині височіє сонце... pic.twitter.com/Um5CWI18nS
- OpenAI (@OpenAI) February 15, 2024
OpenAI стверджує, що їхня модель має певне "розуміння" фізичних законів реального світу. Однак іноді виникають складнощі під час створення складних сцен і причинно-наслідкових зв'язків.
Крім синтезу відео "з нуля", Sora може допрацьовувати та розширювати вже наявні відеозаписи. Вона здатна заповнювати пропущені кадри в послідовності зображень.
Наразі Sora доступна тільки "червоним командам", які оцінюють модель на предмет потенційної шкоди та ризиків. OpenAI також відкрила доступ деяким візуальним художникам, дизайнерам і режисерам, щоб отримати зворотний зв'язок.
Джерело: OpenAI
