ByteDance запускає ШІ-відеогенератор OmniHuman-1, який створює надреалістичні відео з будь-якого фото
Китайська компанія ByteDance, материнська компанія TikTok, анонсувала новий фреймворк штучного інтелекту під назвою OmniHuman-1. Цей інструмент може перетворити одне зображення та аудіозапис на реалістичне відео з точними рухами обличчя і тіла.
Що відомо
OmniHuman-1 використовує технологію мікшування даних, що дає йому змогу створювати реалістичніші відео порівняно з іншими моделями. Дослідники ByteDance заявили, що розробка OmniHuman-1 включала навчання на 19 000 годинах відеоматеріалів, що значно поліпшило якість генерованих відео.
Інструмент підтримує зображення будь-якого співвідношення сторін, чи то портрети, чи то зображення в повний зріст. OmniHuman-1 може генерувати реалістичні рухи рук, міміку і жести тіла, що робить його ідеальним для створення образів у віртуальній реальності, освітніх відео та інших цілей. Приклад такої генерації з фото Альберта Ейнштейна можна побачити нижче.
Поки що OmniHuman-1 перебуває на стадії досліджень, але його потенціал уже викликає великий інтерес. Коли він стане доступним широкому загалу, він конкуруватиме з іншими інструментами, такими як Sora і Veo від OpenAI та Google відповідно.
Джерело: omnihuman
