融光：基于Agent的全流程AI视频创作平台_云技派 233

Was ist 融光

融光 ist ein open-source, auf einer Agent-Architektur basierendes KI-Tool zur Erstellung von Kurzfilmen, das den gesamten Workflow vom Schreiben des Drehbuchs bis zur Videogenerierung automatisiert. Es richtet sich hauptsächlich an Content-Ersteller und kann eingegebene Textdrehbücher automatisch in strukturierte Storyboards zerlegen und anschließend mehrere gängige KI-Modelle aufrufen, um passende Bilder und Videoclips zu generieren.

Kernfunktionen

• Drehbuchverwaltung: Unterstützt das Erstellen und Bearbeiten von Videodrehbüchern mit strukturierter Verwaltung nach Episoden und Szenen.

• KI-Storyboard-Generierung: Zerlegt das Drehbuch automatisch in visualisierbare Storyboards mit Bildbeschreibungen, Kameraführung und weiteren Informationen.

• KI-Bildgenerierung: Integriert mehrere KI-Bildgenerierungs-Engines und kann Storyboard-Referenzbilder mit einem Klick erstellen.

• KI-Videogenerierung: Erzeugt auf Basis der Storyboard-Beschreibungen und Referenzbilder die entsprechenden Videoclips.

• Materialverwaltung: Zentrale Verwaltung aller im Projekt enthaltenen Bilder, Videos und sonstigen Materialien.

• Unterstützung mehrerer Modelle: Integriert gängige große Modelle wie OpenAI, Claude, Gemini, Tongyi Qianwen, DeepSeek, Ollama.

• Visualisierter Agent-Workflow: Pipeline-Knoten werden visuell dargestellt, der Erstellungsprozess ist transparent und steuerbar.

Technische Architektur

• Backend: Java 21 + Spring Boot 3.5 + Spring AI

• Frontend: Next.js 16 + React 19 + TypeScript

• Datenbank: MySQL + Redis

• Speicher: Unterstützt lokalen Speicher, Alibaba Cloud OSS, Tencent COS, MinIO und andere S3-kompatible Speicherlösungen

Installation und Nutzung

Bereitstellungsmethoden

Docker-One-Click-Bereitstellung:

1. Docker-Umgebung installieren

2. Projekt-Repository klonen: git clone https://github.com/Stonewuu/ai-fusion-video.git

3. Im Projekt-Hauptverzeichnis ausführen: docker compose up -d

Lokale Entwicklung aus dem Quellcode:

1. Umgebung vorbereiten: JDK 21+, Node.js 20+, pnpm 9+, MySQL, Redis

2. Zuerst Middleware wie MySQL und Redis starten

3. Backend- und Frontend-Dienste jeweils separat starten

Nutzungsablauf

1. Neues Projekt erstellen, Drehbuch oder Text einfügen

2. Auf „KI-Smart-Analyse" klicken, der Agent zerlegt den Text automatisch in strukturierte Storyboards

3. Im Storyboard-Editor Prompts und Kamerabewegungsparameter feinjustieren

4. Workflow ausführen, der Agent plant automatisch die Generierung von Referenzbildern → Auswahl und Festlegung → Generierung der Videoclips

5. Das System fügt alle Clips automatisch zusammen und exportiert den fertigen Film

Einsatzszenarien

• Erstellung von Kurzvideos: Massenproduktion für Content-Creator

• Werbung und Marketing: Schnelle Iteration mehrerer Versionen von Werbe-Storyboards

• Bildung und Training: Lehrpläne werden automatisch in visualisierbare Kursabschnitte zerlegt

• Film-Previsualization: Unabhängige Filmemacher erstellen schnell Storyboards und dynamische Previews

• Animations-Prototypen: Überprüfung von Erzählrhythmus und visuellem Stil

Vorteile von 融光

• Vollständige Workflow-Automatisierung: Deckt den kompletten Workflow vom Drehbuch bis zum fertigen Film ab und reduziert manuelle Eingriffe

• Kompatibilität mit mehreren Modellen: Keine Bindung an einen einzelnen KI-Anbieter, unterstützt flexible Wechsel zwischen gängigen großen Modellen

• Open Source und anpassbar: Unterstützt private Bereitstellung und tiefergehende Funktionserweiterungen

• Storyboard-gesteuerte Generierung: Storyboards als Zwischenschicht gewährleisten, dass der Videoinhalt mit der Drehbuchabsicht übereinstimmt

Vergleich mit 火宝短剧

Github: https://github.com/Stonewuu/ai-fusion-video