Исследователи научили ИИ автоматически генерировать трейлеры к фильмам
Согласитесь, иной раз в кинотеатре трейлеры будущих фильмов, которые крутят перед сеансом, оказываются интереснее очередного сиквела очередного сиквела, который вы пришли посмотреть из-за увиденного ранее трейлера. Часто (слишком часто, по мнению редакции gg) бывает так, что фильм попросту не дотягивает до наших ожиданий, спровоцированных качественным трейлером.
Создание таких захватывающих трейлеров — целая наука. Чтобы смонтировать хороший трейлер даже к плохому фильму, нужно быть как минимум неплохим психологом. Поправка: нужно было быть неплохим психологом.
По словам исследователей из Эдинбургского университета, они разработали модель ИИ на основе пары нейронных сетей, которая способна выдать подходящий, эмоционально захватывающий трейлер к любому фильму. Команда уже использовала эту систему для создания более 40 трейлеров к существующим фильмам, и сотрудники Amazon Turk, как правило, предпочитали генерируемые ИИ трейлеры официальным.
Задача не так проста, как может показаться. Слово авторам:
Для автоматического создания трейлеров нам необходимо выполнять низкоуровневые задачи, такие как идентификация человека, распознавание действий и предсказание настроения, а также более высокоуровневые задачи, такие как понимание связей между событиями и их причинно-следственной связи, а также умозаключения о персонажах и их действиях.
Исследователи смогли добиться результата, используя две отдельные нейронные сети. Первая обрабатывает видео- и аудиоматериалы фильма, чтобы найти интересные сцены. А вторая, по сути, является арбитром того, что может быть интересно зрителю. Она просматривает текстовую версию фильма - подобно сценарию - и использует обработку естественного языка, чтобы найти важные и эмоциональные моменты.
Готовая модель генерирует новые трейлеры, используя "понимание фильма", основанное на том, как нейронные сети обрабатывают входные данные.
Источник: techxplore
Для тех, кто хочет знать больше:
Подписывайтесь на наш нескучный канал в Telegram, чтобы ничего не пропустить.
Поделиться
