Drehbuch-Assistent▸ 
AI Apps 
AI Nachrichten 
Zhipu Qingying: KI-Videogenerierungstool von Zhipu AI
Zhipu Qingying: KI-Videogenerierungstool von Zhipu AIEinführung
智谱清影 ist das neueste KI-Videogenerierungs-Tool, das von 智谱 AI vorgestellt wurde. 智谱清影 unterstützt zwei Modi: Text-zu-Video und Bild-zu-Video und kann schnell Videoinhalte von 6 Sekunden Länge mit einer Auflösung von bis zu 1440 x 960 erzeugen – und das in nur 30 Sekunden.
智谱清影 basiert auf einer multimodalen Large-Model-Technologiebasis. Das Kern-Videogenerierungsmodell ist CogVideoX, das eine neuartige DiT-Architektur verwendet, um Videoinformationen effizienter zu komprimieren und die drei Dimensionen Text, Zeit und Raum zu vereinen. Darüber hinaus verfügt 智谱清影 über eine hohe Steuerbarkeit, sodass Nutzer die erzeugten Videoinhalte sprachlich kontrollieren können.
Highlights und Funktionen von 智谱清影:
Text-zu-Video: Der Nutzer gibt eine Textbeschreibung oder ein Skript ein, und die KI erzeugt anhand dieser Textinformationen Videoinhalte.
Bild-zu-Video: Der Nutzer lädt ein oder mehrere Standbilder hoch, und die KI analysiert den Bildinhalt und erzeugt daraus ein dynamisches Video.
Hintergrundmusik hinzufügen: Es wird unterstützt, den erzeugten Videos Hintergrundmusik hinzuzufügen, darunter Typen wie ruhig, entspannt-fröhlich, melancholisch, episch und witzig.
Schnelle Generierung: Im Vergleich zu anderen ähnlichen Produkten auf dem Markt kann 清影 die Videoerzeugungszeit deutlich verkürzen. Der Nutzer muss nur etwa 30 Sekunden warten, um ein 6-Sekunden-Video zu erhalten. Die Inferenzzeit wurde von der bisherigen Größenordnung in Minuten auf Sekunden komprimiert, was die Effizienz erheblich steigert.
Hohe Steuerbarkeit: 清影 verbessert durch optimierte Techniken und ein selbst entwickeltes, Ende-zu-Ende-Videoverstehensmodell die Fähigkeit, Nutzeranweisungen zu befolgen, sodass die erzeugten Videos näher an der kreativen Absicht des Nutzers liegen. Durch detaillierte Beschreibungen von Szenen, Kameraführung und Details können Nutzer zufenriedenstellende Ergebnisse erzielen und die Anzahl der „Versuche“ wird reduziert.
Vielfältige Stile: Nutzer können verschiedene Stile für ihre Kreationen wählen, darunter unter anderem Cartoon-3D, Schwarz-Weiß, Ölgemälde und filmisch, um individuelle und kreative Ausdrucksmöglichkeiten zu erfüllen.
Für alle zugänglich: Der 清影-Agent ist für alle Nutzer geöffnet – sowohl gewöhnliche Nutzer als auch Entwickler können ihn problemlos verwenden. Unternehmen und Entwickler können die Funktionen Text-zu-Video und Bild-zu-Video zudem per API in ihre eigenen Anwendungen integrieren.
Integrierte Vertonung: 清影 bietet außerdem eine Vertonungsfunktion. Die vom Nutzer erzeugten Videos können automatisch mit Musik unterlegt werden, was den Videoerstellungsprozess vereinfacht und es selbst Anwendern ohne professionelle Fähigkeiten ermöglicht, schnell Videoinhalte mit Bild und Ton zu produzieren.
Technische Grundlage: Die technologische Basis hinter 清影 ist das von 智谱 AI selbst entwickelte Videogenerierungs-Large-Model CogVideoX. Dieses Modell verwendet eine Sora-ähnliche DiT-Struktur und kann Text-, Zeit- und Rauminformationen vereinen. Die optimierte Modellinferenz ist 6-mal schneller als die Vorgängerversion.
Technische Merkmale von 智谱清影:
Schnelle Generierung: Ein 6-Sekunden-Video wird in nur 30 Sekunden fertiggestellt.
Hohe Befolgung von Anweisungen: Auch komplexe Prompts kann 清影 genau verstehen und ausführen.
Inhaltliche Kohärenz: Die erzeugten Videos können die Bewegungsvorgänge der realen Welt gut wiedergeben.
Flexible Bildsteuerung: Beispielsweise kann die Kamera flüssig den drei Hunden im Bild folgen.
Branchenanwendungen von 智谱清影:
Werbeproduktion
Filmschnitt
Kurzvideo-Produktion
Kreative Content-Erstellung
Wie verwendet man 智谱清影, um Videos zu erzeugen?
1. Plattform aufrufen:Öffnen Sie die offizielle Website von 智谱清言 unter chatglm.cn/video, registrieren Sie sich und melden Sie sich an.
2. Generierungsmethode wählen:Wählen Sie im 清影-Agenten die Funktion „AI Text-zu-Video“ oder „AI Bild-zu-Video“.
3. Prompt eingeben:
Text-zu-Video: Geben Sie eine detaillierte Textbeschreibung oder ein Skript ein. Je detaillierter der Prompt, desto höher die Qualität des erzeugten Videos. Anstatt beispielsweise „Ein kleiner Junge trinkt Kaffee“ einzugeben, ist es besser, Folgendes einzugeben: „Kameraschwenk, ein kleiner Junge sitzt auf einer Parkbank und hält eine Tasse dampfenden Kaffee in der Hand. Er trägt ein blaues Hemd und sieht fröhlich aus. Im Hintergrund ist ein von Bäumen gesäumter Park, und Sonnenlicht fällt durch die Blätter auf den Jungen“.
Bild-zu-Video: Laden Sie ein oder mehrere Standbilder hoch und wählen Sie den Bildstil. Sie können den von 清影 bereitgestellten Agenten verwenden, um Prompts zu generieren und so eine präzise und detaillierte Beschreibung sicherzustellen.
4. Videostil und Parameter wählen:Wählen Sie den gewünschten Videostil, darunter Cartoon 3D, Schwarz-Weiß, Ölgemälde, filmisch usw. Sie können auch die emotionale Stimmung und die Kamerabewegung einstellen.
5. Hintergrundmusik hinzufügen:清影 unterstützt das Hinzufügen von Hintergrundmusik zu den erzeugten Videos, darunter Typen wie ruhig, entspannt-fröhlich, melancholisch, episch und witzig.
6. Video erzeugen:Klicken Sie auf die Schaltfläche zum Erzeugen des Videos. Mit einer voraussichtlichen Wartezeit von etwa 1 Minute wird das Videoergebnis generiert. 清影 kann die Erzeugung eines 6-Sekunden-Videos innerhalb von 30 Sekunden abschließen.
7. Prompt optimieren:
Die Struktur des Prompts sollte so klar wie möglich sein. Komplexe Formeln können Kamerasprache, Licht und Schatten, Beschreibung des Hauptmotivs, Bewegung des Hauptmotivs, Szenenbeschreibung sowie Stimmung/Atmosphäre umfassen. Beispiel: „Kameraschwenk, ein kleiner Junge sitzt auf einer Parkbank und hält eine Tasse dampfenden Kaffee in der Hand. Er trägt ein blaues Hemd und sieht fröhlich aus. Im Hintergrund ist ein von Bäumen gesäumter Park, und Sonnenlicht fällt durch die Blätter auf den Jungen“.
Im Vergleich zu anderen KI-Videogenerierungstools kann 智谱清影 in 30 Sekunden ein 6-Sekunden-Video erzeugen, was deutlich schneller ist als bei vielen anderen KI-Videogenerierungstools. Beispielsweise benötigt das zurzeit in der ersten Liga angesiedelte 可灵 AI für die Erzeugung eines einzelnen 5-Sekunden-Videos in der Regel 2 bis 5 Minuten.
Während der Einführungs-Testphase öffnet 智谱清影 den API-Aufruf für Unternehmen und Entwickler zur Erfahrung und bietet gleichzeitig allen C-End-Nutzern einen kostenlosen Testservice an.
