Runway veröffentlicht Gen-4: Treue, dynamische Bewegungserfassung und Szenenkonsistenz 144

Was ist Gen-4?

Gen-4 ist das neue generative KI-Modell der nächsten Generation, das von Runway am 31. März 2025 offiziell veröffentlicht wurde. Im Vergleich zur Vorgängerversion bietet es deutliche Verbesserungen in Bezug auf die Wiedergabetreue der Videogenerierung, die Erfassung dynamischer Bewegungen, die Szenenkonsistenz sowie das Verständnis und die Umsetzung von Benutzeranweisungen. Es kann mithilfe visueller Referenzen und Textanweisungen hochgradig kohärente und realistische Videoinhalte erstellen, unterstützt mehrere Auflösungen und Perspektiven, arbeitet mit hoher Geschwindigkeit und eignet sich für Szenarien wie Filmproduktion, Spieleentwicklung, Werbung und Content-Erstellung in sozialen Medien.

Technologische Durchbrüche von Gen-4

• Verbesserte Wiedergabetreue: Gen-4 erreicht bei der Videogenerierung eine branchenführende Wiedergabetreue, mit feinen Details und präziser Farbwiedergabe. Im Vergleich zur Gen-3 Alpha-Version wurde die Generierungsgeschwindigkeit um 35 % gesteigert, was auf die Optimierung des Deep-Learning-Frameworks zurückzuführen ist.

• Erfassung dynamischer Bewegungen: Gen-4 erzielt bei der Erfassung dynamischer Bewegungen einen bedeutenden Fortschritt. Der einzigartige Algorithmus kann komplexe Bewegungstrajektorien in Echtzeit analysieren, sodass die erzeugten Videos dynamische Effekte natürlicher und realistischer darstellen.

• Hohe Konsistenz: Gen-4 löst das Problem der Szenenkonsistenz. Sowohl Hauptfiguren und Objekte im Video als auch der gesamte künstlerische Stil bleiben durchgehend hochgradig kohärent und einheitlich.

• Präzises Verständnis und Umsetzung: Gen-4 versteht die eingegebenen Prompts der Nutzer tiefer und setzt sie präziser um. Darüber hinaus verfügt es über erstklassige „Weltenverständnis“-Fähigkeiten, sodass die generierten Inhalte stärker der Logik und den physikalischen Gesetzen entsprechen.

Funktionsmerkmale von Gen-4

• Kombination aus visuellen Referenzen und Anweisungen: Gen-4 kann visuelle Referenzen (wie Bilder oder Videos) zusammen mit Textanweisungen nutzen, um neue Bilder und Videos zu erstellen und so die inhaltliche Kontinuität sowie die Kontrolle der Nutzer über den Verlauf der Geschichte sicherzustellen.

• Generierung aus mehreren Perspektiven: Nutzer können verschiedene Perspektiven und Positionen festlegen; Gen-4 kann Szenen aus mehreren Blickwinkeln generieren.

• Mehrere Ausgabeauflösungen: Gen-4 unterstützt zahlreiche Videoauflösungen, darunter 16:9, 9:16, 1:1, 4:3, 3:4 und 21:9.

Anwendungsszenarien von Gen-4

• Filmproduktion: Gen-4 kann Videoinhalte mit äußerst realistischen Bewegungstrajektorien und starker Dynamik erzeugen und eröffnet der Filmproduktion völlig neue Möglichkeiten. Beispielsweise hat das Runway-Team mit Gen-4 die Kurzfilme „The Lonely Little Flame“ und „New York is a Zoo“ produziert, die das starke erzählerische Potenzial und die visuellen Effektmöglichkeiten demonstrieren.

• Spieleentwicklung: Die hohe Konsistenz und die Fähigkeit zur Erfassung dynamischer Bewegungen ermöglichen es Gen-4, in der Spiele-Videoproduktion schnell hochwertige Videoinhalte zu generieren und die Produktionszyklen zu verkürzen.

• Werbung: Gen-4 kann schnell Werbevideos erstellen, die den Anforderungen der Nutzer entsprechen.

• Content-Erstellung in sozialen Medien: Gen-4 hilft Creatorn, schnell Kurzvideos in verschiedenen Stilen zu produzieren.

Die Bild-zu-Video-Funktion von Gen-4 ist nun offiziell für alle zahlenden Runway-Nutzer sowie Unternehmenskunden verfügbar. Gen-4 unterstützt derzeit die Generierung von Videos mit 5 und 10 Sekunden Länge.

Details:https://runwayml.com/gen-4-bts