Des chercheurs ont appris à l'IA à générer automatiquement des bandes-annonces de films

Par: Yuriy Stanislavskiy | 30.11.2021, 10:26
Des chercheurs ont appris à l'IA à générer automatiquement des bandes-annonces de films

D'accord, parfois au cinéma, les bandes-annonces de futurs films qui sont jouées avant le spectacle s'avèrent plus intéressantes que la suite suivante à la suite suivante, que vous êtes venu regarder à cause de la bande-annonce que vous avez vue plus tôt. Souvent (trop souvent, selon le comité de rédaction gg) il se trouve que le film n'est tout simplement pas à la hauteur de nos attentes, provoqué par une bande annonce de qualité.

Créer des bandes-annonces aussi passionnantes est toute une science. Pour monter une bonne bande-annonce même pour un mauvais film, il faut au moins être un bon psychologue. Correction : besoin C'était être un bon psychologue.

Des chercheurs de l'Université d'Édimbourg disent avoir développé un modèle d'IA basé sur une paire de réseaux de neurones capable de fournir une bande-annonce appropriée et émotionnellement engageante pour n'importe quel film. L'équipe a déjà utilisé ce système pour créer plus de 40 bandes-annonces pour des films existants, et les employés d'Amazon Turk ont ​​généralement préféré les bandes-annonces générées par l'IA aux bandes-annonces officielles.

La tâche n'est pas aussi simple qu'il y paraît. Un mot aux auteurs :

Pour générer automatiquement des bandes-annonces, nous devons effectuer des tâches de bas niveau telles que l'identification d'une personne, la reconnaissance des actions et la prédiction des humeurs, ainsi que des tâches de niveau supérieur telles que la compréhension des relations entre les événements et leur cause, ainsi que des inférences sur les personnages et leurs actions.

Les chercheurs ont pu obtenir le résultat en utilisant deux réseaux de neurones distincts. Le premier traite les séquences vidéo et audio du film pour trouver des scènes intéressantes. Et le second, en fait, est l'arbitre de ce qui peut intéresser le spectateur. Elle scanne la version texte du film - comme un script - et utilise le traitement du langage naturel pour trouver des moments importants et émotionnels.

Le modèle fini génère de nouvelles bandes-annonces à l'aide d'un « aperçu du film » basé sur la façon dont les réseaux de neurones traitent les entrées.

Une source: techxplorer