融光:基于Agent的全流程AI视频创作平台_云技派

融光:基于Agent的全流程AI视频创作平台_云技派 235

一款开源、基于Agent架构的全流程AI视频创作工具,它把输入的文字剧本自动拆解成结构化分镜,再调用多家主流AI模型生成配图和视频片段,从剧本编写到视频生成做到了自动化。

#Ai工具箱 #Ai开源项目

融光:基于Agent的全流程AI视频创作平台_云技派Introducción

Qué es Rongguang

Rongguang es una herramienta de código abierto, basada en una arquitectura de Agent, para la creación integral de cortometrajes con ia, que automatiza desde la escritura del guion hasta la generación de vídeo. Está orientada principalmente a creadores de contenido, capaz de descomponer automáticamente un guion de texto en planos estructurados y luego invocar múltiples modelos de IA convencionales para generar imágenes de referencia y fragmentos de vídeo.

Rongguang

Funciones principales

  • Gestión de guiones: permite crear y editar guiones de vídeo, con gestión estructurada por episodios y escenas.

  • Generación de planos con IA: descompone automáticamente el guion en planos visualizables, con descripciones de imagen, lenguaje de cámara y demás información.

  • Generación de imágenes con IA: integra varios motores de generación de imágenes con IA, capaz de generar imágenes de referencia para los planos con un solo clic.

  • Generación de vídeo con IA: genera los fragmentos de vídeo correspondientes a partir de la descripción del plano y la imagen de referencia.

  • Gestión de materiales: administra de forma unificada las imágenes, vídeos y otros materiales del proyecto.

  • Soporte multimodelo: integra modelos de lenguaje de gran tamaño convencionales como OpenAI, Claude, Gemini, Tongyi Qianwen, DeepSeek y Ollama.

  • Flujo de Agent visualizable: visualización de nodos del Pipeline, con un proceso creativo transparente y controlable.

Arquitectura técnica

  • Backend: Java 21 + Spring Boot 3.5 + Spring AI

  • Frontend: Next.js 16 + React 19 + TypeScript

  • Base de datos: MySQL + Redis

  • Almacenamiento: compatible con almacenamiento local, Alibaba Cloud OSS, Tencent COS, MinIO y otros sistemas compatibles con S3

Instalación y uso

Métodos de despliegue

Despliegue con un solo clic mediante Docker:

  1. Instala el entorno Docker

  2. Clona el repositorio del proyecto: git clone https://github.com/Stonewuu/ai-fusion-video.git

  3. Ejecuta en el directorio raíz del proyecto: docker compose up -d

Desarrollo local desde el código fuente:

  1. Prepara el entorno: JDK 21+, Node.js 20+, pnpm 9+, MySQL, Redis

  2. Arranca primero los middleware como MySQL y Redis

  3. Arranca los servicios de backend y frontend por separado

Flujo de uso

  1. Crea un nuevo proyecto y pega el guion o copy

  2. Haz clic en «Desmontaje inteligente con IA», el Agent dividirá automáticamente el texto en planos estructurados

  3. Realiza ajustes finos en el editor de planos sobre los prompts y los parámetros de movimiento de cámara

  4. Ejecuta el flujo de trabajo; el Agent orquesta automáticamente la generación de imágenes de referencia → selección y bloqueo → generación de fragmentos de vídeo

  5. El sistema une automáticamente todos los fragmentos y exporta el vídeo final

Casos de uso aplicables

  • Creación de vídeos cortos: producción en masa para cuentas de medios propios

  • Publicidad y marketing: iteración rápida de múltiples versiones de planos publicitarios

  • Educación y formación: conversión automática de programas docentes en fragmentos visuales de curso

  • Previsualización audiovisual: generación rápida de storyboards y previsualizaciones dinámicas para productores independientes

  • Prototipos de animación: validación del ritmo narrativo y del estilo visual

Ventajas de Rongguang

  • Automatización integral: cubre el flujo completo desde el guion hasta el vídeo final, reduciendo la intervención manual

  • Compatibilidad multimodelo: sin dependencia de un único proveedor de IA, con conmutación flexible entre modelos convencionales

  • Código abierto y personalizable: admite despliegue privado y ampliación profunda de funcionalidades

  • Generación dirigida por planos: utiliza los planos como capa intermedia para garantizar la coherencia entre el contenido de vídeo y la intención del guion

Comparación con Huobao Duanju

Dimensión de comparaciónRongguangHuobao Duanju
Posicionamiento del productoPlataforma de código abierto para la creación integral de vídeo con IAPlataforma de producción automatizada de cortometrajes impulsada por IA
Licencia de código abiertoMIT License (uso comercial libre)CC BY-NC-SA 4.0 (uso comercial restringido)
Arquitectura técnicaJava (Spring Boot) + Node.jsGo + Vue3
Características claveCompatibilidad multimodelo, generación dirigida por planos, flujo visualizableGestión de consistencia de personajes, alta automatización del guion al vídeo
Base de datosMySQLSQLite (por defecto)

Github: https://github.com/Stonewuu/ai-fusion-video

Herramientas relacionadas con 融光:基于Agent的全流程AI视频创作平台_云技派