融光：基于Agent的全流程AI视频创作平台_云技派 238

Qu'est-ce que Fusion

Fusion est un outil open source basé sur une architecture Agent pour la création de courtes séries en IA, entièrement IA, de l'écriture du scénario à la génération de vidéo, le tout automatisé. Il s'adresse principalement aux créateurs de contenu et permet de décomposer automatiquement un script textuel en plans structurés, avant de faire appel à plusieurs modèles d'IA leaders du marché pour générer les images et les clips vidéo associés.

Fonctionnalités clés

• Gestion des scénarios : permet de créer et d'éditer des scripts vidéo, avec une gestion structurée par épisode et par scène.

• Génération de plans par IA : décompose automatiquement le scénario en plans visualisables, incluant les descriptions d'images et le langage cinématographique.

• Dessin par IA : intègre plusieurs moteurs de génération d'images IA, permettant de produire en un clic des images de référence pour les plans.

• Génération de vidéo par IA : génère les clips vidéo correspondants à partir des descriptions de plans et des images de référence.

• Gestion des ressources : gestion unifiée des images, vidéos et autres ressources du projet.

• Support multi-modèles : intègre les principaux grands modèles du marché tels qu'OpenAI, Claude, Gemini, Tongyi Qianwen, DeepSeek, Ollama, etc.

• Flux Agent visualisé : affichage visuel des nœuds du pipeline, processus de création transparent et contrôlable.

Architecture technique

• Backend : Java 21 + Spring Boot 3.5 + Spring AI

• Frontend : Next.js 16 + React 19 + TypeScript

• Base de données : MySQL + Redis

• Stockage : prend en charge le stockage local, Alibaba Cloud OSS, Tencent COS, MinIO et autres stockages compatibles S3

Installation et utilisation

Méthode de déploiement

Déploiement Docker en un clic :

1. Installer l'environnement Docker

2. Cloner le dépôt du projet : git clone https://github.com/Stonewuu/ai-fusion-video.git

3. Exécuter à la racine du projet : docker compose up -d

Développement local depuis les sources :

1. Préparer l'environnement : JDK 21+, Node.js 20+, pnpm 9+, MySQL, Redis

2. Démarrer d'abord les middlewares MySQL et Redis

3. Démarrer séparément les services backend et frontend

Flux d'utilisation

1. Créer un nouveau projet, coller le scénario ou le copy

2. Cliquer sur « Décomposition intelligente par IA », l'Agent divise automatiquement le texte en plans structurés

3. Affiner les prompts et les paramètres de mouvement de caméra dans l'éditeur de plans

4. Exécuter le workflow, l'Agent orchestre automatiquement la génération des images de référence → sélection et verrouillage → génération des clips vidéo

5. Le système assemble automatiquement tous les clips et exporte le produit final

Cas d'usage

• Création de vidéos courtes : production en masse pour les médias indépendants

• Marketing publicitaire : itération rapide de plusieurs versions de storyboards publicitaires

• Formation et éducation : décomposition automatique des programmes pédagogiques en segments de cours visualisables

• Pré-visualisation cinématographique : génération rapide de storyboards et de pré-visualisations dynamiques pour les producteurs indépendants

• Prototypage d'animation : validation du rythme narratif et du style visuel

Avantages de Fusion

• Automatisation de bout en bout : couvre le workflow complet du scénario au produit final, réduisant l'intervention humaine

• Compatibilité multi-modèles : non lié à un fournisseur d'IA unique, permet de basculer librement entre les principaux grands modèles

• Open source et personnalisable : prend en charge le déploiement privé et l'extension approfondie des fonctionnalités

• Génération pilotée par les plans : utilise les plans comme couche intermédiaire, garantissant la cohérence entre le contenu vidéo et l'intention du scénario

Comparaison avec Huobao Short Drama

Github :https://github.com/Stonewuu/ai-fusion-video