Drehbuch-Assistent▸ 
AI Apps 
AI Nachrichten 
Runwayml_云技派,专注ai人工智能!
Runwayml_云技派,专注ai人工智能!Einführung
Heute möchte ich euch ein KI-Video-Bearbeitungswerkzeug namens Runwayml vorstellen, dessen Funktionen über die reine Bearbeitung hinausgehen. Noch wichtiger ist, dass es Text-zu-Video unterstützt – ihr gebt einfach einen Satz ein und schon entsteht ein Blockbuster. Es ist ein Produkt von Runway, dem Unternehmen, das auch hinter Stable Diffusion und „Everything Everywhere All at Once" steckt.
Runwayml stellt eine bedeutende Verbesserung gegenüber der ersten Generation dar. Runwayml kann vollständige Videos allein auf Basis von Textbeschreibungen erstellen, während ältere Versionen nur mithilfe von Daten aus vorhandenen Videos neue Videos erzeugen konnten. Das Unternehmen forscht seit letztem Dezember an diesem innovativen Modell, das im März dieses Jahres veröffentlicht, aber erst kürzlich für die Allgemeinheit kostenlos freigegeben wurde – und innerhalb eines Tages das gesamte Netz in Aufruhr versetzte. Sie freuen sich nun bekannt zu geben, dass dies das erste öffentlich verfügbare Text-zu-Video-KI-Modell ist.
Eines der neuesten Modelle von Runwayml ist Gen-2, ein generatives Videomodell, das realistische und konsistente Videos aus Text oder Bildern synthetisieren kann. Gen-2 basiert auf einer neuen Technologie namens Stable Diffusion, die es dem Modell ermöglicht, aus umfangreichen Videodatensätzen zu lernen und qualitativ hochwertige Ergebnisse zu erzeugen. Gen-2 kann für verschiedene Anwendungen eingesetzt werden, etwa zum Erstellen neuer Szenen, Charaktere oder Animationen, zum Verbessern bestehender Videos oder zum Generieren von Videoinhalten für Storytelling oder Bildungszwecke.
Gen-2 unterscheidet sich von Gen-1, einem weiteren generativen Videomodell von RunwayML, das jedes Video entsprechend einem vorgegebenen Stil oder Inhalt in ein anderes Video umwandeln kann. Gen-1 verwendet eine andere Technologie namens Latent Diffusion, bei der das Eingangsvideo in einen latenten Raum kodiert und anschließend in ein neues Video dekodiert wird. Gen-1 eignet sich für Aufgaben wie Video-zu-Video-Umwandlung, Stiltransfer oder Inhaltsbearbeitung.
Vorteile von Runwayml:
Es kann Videos in jedem vorstellbaren Stil synthetisieren – allein mithilfe von Textaufforderungen.
Es kann den Stil eines beliebigen Bildes oder einer Aufforderung auf jedes Einzelbild eines Videos übertragen.
Es kann Modelle in vollständig stilisierte und animierte Renderings verwandeln.
Es kann Motive im Video isolieren und sie durch einfache Textaufforderungen verändern.
Es kann texturlose Renderings in realistische Ergebnisse verwandeln, indem ein Eingabebild oder eine Aufforderung angewendet wird.
Wie verwendet man Runwayml?
Um Runway zu nutzen, registriert euch für ein kostenloses Konto und greift auf deren magische KI-Werkzeuge zu. Mit diesen Werkzeugen könnt ihr Videos, Bilder und Animationen aus Text, Bildern oder Videoclips erzeugen. Ihr könnt außerdem eure eigenen individuellen KI-Modelle trainieren, Hintergründe aus Videos entfernen, Zeitlupenvideos erstellen und vieles mehr.
