Adobe hat ein beeindruckendes KI-gestütztes Projekt zur Skalierung von Videos vorgestellt

Adobe-Forscher haben ein neues generatives Modell der künstlichen Intelligenz, VideoGigaGAN, entwickelt, das unscharfe Videos bis zum Achtfachen der ursprünglichen Auflösung skalieren kann.

Was bekannt ist

Adobe behauptet, dass VideoGigaGAN andere Video Super Resolution (VSR)-Hochskalierungsmethoden übertrifft und detailliertere Ergebnisse ohne unerwünschte KI-induzierte Artefakte liefert.

Traditionell sind generative adversarische Netzwerke (GANs) effektiv für die Skalierung von Standbildern auf hohe Auflösung. Bei Videos haben sie jedoch Schwierigkeiten, da sie Flimmern und andere Fehler verursachen. Alternative Methoden vermeiden dies, bieten aber nicht die gleiche hohe Qualität.

VideoGigaGAN zielt darauf ab, die besten Aspekte zu kombinieren - hochwertige GAN-Ergebnisse mit minimalen Problemen durch Artefakte in den Ausgabebildern. Adobe hat mehrere Beispiele bereitgestellt, die zeigen, wie die Technologie funktioniert.

Dopis vid @luokai

Überarbeitung der Threads

Einige feine Details im Demovideo, wie z. B. Hauttextur und Falten, scheinen vollständig generiert zu sein, aber insgesamt sehen die Ergebnisse natürlich aus. Es ist schwer zu sagen, ob die Auflösung mit generativer KI verbessert wurde, was Fragen über die Natur von Foto- und Videoinhalten aufwirft.

Vorerst bleibt VideoGigaGAN ein Forschungsprojekt, und es ist nicht bekannt, ob Adobe die Technologie in seine Produkte wie Premiere Pro einbauen wird. Zuvor hatte das Unternehmen bereits ein weiteres Experiment zur Auflösungsverbesserung durch Diffusion angekündigt: Project Res-Up.

Quelle: The Verge