Forscher haben der KI beigebracht, automatisch Filmtrailer zu generieren

Von: Yuriy Stanislavskiy | 30.11.2021, 11:23

Stimmen Sie zu, manchmal erweisen sich im Kino Trailer von zukünftigen Filmen, die vor der Show gespielt werden, als interessanter als die nächste Fortsetzung der nächsten Fortsetzung, die Sie aufgrund des Trailers gesehen haben, den Sie zuvor gesehen haben. Häufig (zu viel oft, so die Redaktion gg) kommt es vor, dass der Film einfach nicht unseren Erwartungen entspricht, provoziert durch einen qualitativ hochwertigen Trailer.

Solche aufregenden Trailer zu erstellen ist eine ganze Wissenschaft. Um auch für einen schlechten Film einen guten Trailer zu bearbeiten, muss man zumindest ein guter Psychologe sein. Korrektur: brauchen Es war ein guter Psychologe sein.

Forscher der University of Edinburgh sagen, dass sie ein KI-Modell entwickelt haben, das auf einem Paar neuronaler Netze basiert, das in der Lage ist, einen geeigneten, emotional ansprechenden Trailer für jeden Film zu liefern. Das Team hat dieses System bereits verwendet, um über 40 Trailer für bestehende Filme zu erstellen, und die Mitarbeiter von Amazon Turk zogen im Allgemeinen die KI-generierten Trailer den offiziellen vor.

Die Aufgabe ist nicht so einfach, wie es scheinen mag. Ein Wort an die Autoren:

Um Trailer automatisch zu generieren, müssen wir Aufgaben auf niedriger Ebene wie das Identifizieren einer Person, das Erkennen von Handlungen und das Vorhersagen von Stimmungen sowie übergeordnete Aufgaben wie das Verständnis der Zusammenhänge zwischen Ereignissen und ihrer Ursache sowie Rückschlüsse auf Charaktere und Deren Aktionen.

Das Ergebnis konnten die Forscher mit zwei getrennten neuronalen Netzen erzielen. Die erste verarbeitet das Video- und Audiomaterial des Films, um interessante Szenen zu finden. Und die zweite ist in der Tat der Entscheider, was für den Betrachter von Interesse sein könnte. Sie scannt die Textversion des Films – wie ein Drehbuch – und nutzt Natural Language Processing, um wichtige und emotionale Momente zu finden.

Das fertige Modell generiert neue Trailer unter Verwendung von "Filmeinblicken", basierend darauf, wie neuronale Netze Eingaben verarbeiten.

Eine Quelle: techxplore