ArcReel: herramienta IA de código abierto para convertir novelas en vídeo 110

¿Qué es ArcReel?

ArcReel es una herramienta de IA de código abierto para generar vídeos a partir de novelas, que puede convertir automáticamente el texto de tu novela en un vídeo corto completo. A diferencia de las herramientas que solo pueden "introducir una frase para generar un fragmento de vídeo", ArcReel es más bien una línea de producción totalmente automatizada: desde la novela hasta el vídeo final, todo el proceso lo ejecutan agentes de IA por sí mismos. Solo tienes que subir el contenido de la novela y la IA se encargará automáticamente de la generación del guion, el diseño de personajes, el dibujo de storyboards, la generación de fragmentos de vídeo y, por último, la composición del vídeo completo, prácticamente sin intervención manual por tu parte.

Primero genera una imagen de diseño del personaje, y todas las escenas posteriores toman esa imagen como referencia, garantizando que el mismo personaje tenga el mismo aspecto en diferentes planos.

En cuanto a la generación de imágenes y vídeos, es compatible con proveedores de modelos principales como Gemini, Grok y OpenAI, y también puedes cambiar entre ellos en cualquier momento.

Los fragmentos de vídeo generados se pueden exportar con un solo clic como borrador de Jianying (CapCut), para que puedas ajustarlos manualmente después.

Para el despliegue, basta con Docker para ponerlo en marcha rápidamente. Si quieres hacer cortometrajes con IA pero no te apetece complicarte demasiado, puedes probar esta herramienta.

Capacidades principales

🤖 Flujo de trabajo con agentes de IA: basado en Claude Agent SDK, con colaboración multi-agente mediante Skill + Subagentes enfocados, completando automáticamente todo el proceso, desde el guion hasta la composición del vídeo

🎨 Generación de imágenes con múltiples proveedores: Gemini, Volcengine Ark, Grok, OpenAI y proveedores personalizados; las imágenes de diseño de personajes garantizan la consistencia de los personajes, y el seguimiento de pistas mantiene la coherencia de atrezo y escenas entre planos

🎬 Generación de vídeo con múltiples proveedores: Veo 3.1, Seedance, Grok, Sora 2 y proveedores personalizados, con cambio disponible a nivel global o de proyecto

⚡ Cola de tareas asíncrona: límite de RPM + canales concurrentes independientes para imágenes/vídeo, programación basada en lease, compatible con la reanudación de transferencias interrumpidas

🖥️ Espacio de trabajo visual: interfaz web para gestionar proyectos, previsualizar materiales, revertir versiones y seguimiento de tareas en tiempo real mediante SSE, con asistente de IA integrado

Características de ArcReel

• Pipeline de producción completo — Novela → Guion → Diseño de personajes → Imágenes de storyboard → Fragmentos de vídeo → Vídeo final, todo organizado con un solo clic

• Arquitectura multi-agente — Skills de orquestación que detectan el estado del proyecto, invocan automáticamente Subagentes enfocados; cada Subagente completa una tarea de forma independiente y devuelve un resumen

• Soporte de múltiples proveedores — La generación de imágenes/vídeo/texto es compatible con los cuatro proveedores preconfigurados: Gemini, Volcengine Ark, Grok y OpenAI, con cambio a nivel global o de proyecto

• Proveedores personalizados — Conecta cualquier API compatible con OpenAI o compatible con Google (por ejemplo, Ollama, vLLM, intermediarios de terceros); detecta automáticamente los modelos disponibles y les asigna tipos de medios, con la misma funcionalidad que los proveedores preconfigurados

• Dos modos de contenido — El modo narrador divide los fragmentos según el ritmo de lectura, mientras que el modo animación de episodios organiza el contenido según la estructura de escenas/diálogos

• Planificación progresiva por episodios — División colaborativa persona-máquina de novelas largas: detección peek → sugerencia de puntos de corte por parte del agente → confirmación del usuario → división física, produciendo bajo demanda

• Imágenes de referencia de estilo — Sube una imagen de estilo; la IA la analiza automáticamente y la aplica de forma uniforme a todas las generaciones de imágenes, garantizando la coherencia visual de todo el proyecto

• Consistencia de personajes — La IA genera primero la imagen de diseño del personaje, y todos los storyboards y vídeos posteriores toman ese diseño como referencia

• Seguimiento de pistas — Los objetos de atrezzo clave y los elementos de escena se marcan como "pistas", manteniendo la coherencia visual entre planos

• Historial de versiones — Cada regeneración guarda automáticamente una versión histórica, con soporte para revertir con un solo clic

• Seguimiento de costes multi-proveedor — Imágenes, vídeo y texto se incluyen en el cálculo de costes, con facturación según la política de cada proveedor y estadísticas separadas por moneda

• Exportación a borrador de Jianying (CapCut) — Exportación por episodios en ZIP del borrador de Jianying, compatible con Jianying 5.x / 6+ (con guía de uso)

• Importación/exportación de proyectos — Empaquetado completo del proyecto para facilitar copias de seguridad y migraciones

Flujo de trabajo de ArcReel

Subir la novela → La IA la divide en guiones → Genera imágenes de diseño de personajes/pistas → Genera imágenes de storyboard → Genera fragmentos de vídeo → FFmpeg compone el vídeo final (o exporta como borrador de Jianying)

Stack técnico y despliegue de ArcReel

• Frontend: React 19 + TypeScript + Tailwind CSS 4

• Backend: FastAPI + Python 3.12+

• Capa de IA: Claude Agent SDK + API de múltiples proveedores (Gemini / Volcengine Ark / Grok / OpenAI)

• Base de datos: SQLite (por defecto) o PostgreSQL (entorno de producción)

• Despliegue: Docker Compose para puesta en marcha con un solo clic, puerto por defecto 1241

Dirección de Github:https://github.com/ArcReel/ArcReel

Noticias relacionadas:

Plataforma de creación de cortometrajes con IA

Herramientas de producción de cómic-drama con IA