NarratoAI: herramienta todo-en-uno de comentarios de vídeo con IA y edición automática 262

📌 ¿Qué es Narratoai?

NarratoAI es una herramienta open source de automatización de comentarios de vídeo basada en LLM, que integra en un flujo automatizado el proceso completo de "redacción de guiones - edición de vídeo - locución con IA - generación de subtítulos". Está orientada principalmente a creadores de vídeos cortos, autores de comentarios de cine y televisión, equipos de MCN y operadores de medios propios.

NarratoAI fue desarrollado por el usuario de GitHub linyqh y cuenta actualmente con aproximadamente 7K estrellas y 880 forks. Admite tanto el despliegue local como el despliegue con Docker.

✨ Características de NarratoAI

🎬 Redacción inteligente de guiones: utiliza LLM para generar automáticamente guiones de comentarios de vídeo, con compatibilidad multilingüe

🎞️ Edición automática de vídeo: edita automáticamente el vídeo según el guion, admite el modo de concatenación aleatoria, permite personalizar la duración de los fragmentos y la relación de aspecto (por ejemplo, vertical 9:16)

🗣️ Generación de locuciones con IA: incorpora síntesis de voz TTS en varios idiomas, permite ajustar el volumen y la velocidad, y ofrece varios estilos de voz

📝 Creación inteligente de subtítulos: genera subtítulos sincronizados con la voz y permite personalizar la fuente, la posición, el color y el contorno

👀 Optimización de la previsualización: antes de generar, se pueden previsualizar las marcas de tiempo, las descripciones de imagen y las locuciones correspondientes, y es posible regenerar individualmente cualquier fragmento

🚀 Compatibilidad con múltiples modelos: admite modelos como Alibaba Qwen2-VL, DeepSeek R1/V3 y Google Gemini

💻 Soporte para múltiples escenarios: cubre escenarios populares de creación como comentarios generales de cine y televisión, comentarios de microdramas y mezclas de microdramas

🔍 Optimización SEO: optimiza la estructura del contenido según palabras clave para mejorar la visibilidad en los motores de búsqueda

🎯 Escenarios de aplicación de NarratoAI

• Creación de comentarios de cine y televisión: producción rápida de vídeos de comentarios profesionales sobre películas, series y microdramas

• Producción de vídeos cortos: producción en masa de contenido de vídeo corto adecuado para plataformas como Douyin, Kuaishou, Bilibili y Canal de Vídeo

• Vídeos de formación educativa: los profesores o las instituciones de formación pueden crear rápidamente material didáctico

• Presentaciones de productos comerciales: las empresas pueden crear vídeos de presentación de productos que destaquen sus características y ventajas

• Operación de medios propios: los creadores individuales pueden publicar varios contenidos al día para aumentar la influencia de su cuenta

✅ Ventajas y desventajas de NarratoAI

Ventajas

• Automatización completa del flujo: desde el guion hasta el vídeo final con un solo clic, genera un vídeo completo en menos de 10 minutos, con un aumento de eficiencia superior al 80%

• Sin barreras de entrada: no se requieren habilidades profesionales de edición, los usuarios sin experiencia pueden empezar rápidamente

• Coste muy bajo: editar 10 minutos de vídeo cuesta solo unos 0,1 yuan (costes de llamadas a la API)

• Open source y gratuito: uso completamente gratuito, código transparente y compatible con desarrollo secundario

• Personalización flexible: permite ajustar manualmente los parámetros para satisfacer necesidades creativas individuales

Desventajas

• Dependencia del modelo: las versiones anteriores dependían principalmente del modelo Google Gemini, con soporte limitado para otros modelos (las versiones nuevas lo han mejorado)

• Requisitos de hardware: aunque no se requiere tarjeta gráfica, es necesaria una configuración de CPU de 4 núcleos + 8 GB de RAM

• Limitaciones de compatibilidad con chino: las versiones anteriores tenían limitaciones al procesar vídeos en chino, los nombres de archivo no podían contener caracteres chinos, especiales ni espacios

• Consistencia de los resultados: el contenido generado automáticamente puede requerir ajustes manuales para lograr los mejores resultados

🛠️ Cómo usar NarratoAI

Preparación del entorno

• Requisitos del sistema: Windows 10+ / MacOS 11.0+ / Linux

• Configuración de hardware: CPU de 4 núcleos, 8 GB de RAM (tarjeta gráfica no obligatoria)

• Versión de Python: 3.10 o superior

Métodos de despliegue (elija uno)

Método 1: Despliegue local

git clone https://github.com/linyqh/NarratoAI.git
cd NarratoAI
pip install -r requirements.txt
cp config.example.toml config.toml
# 编辑 config.toml 填入 API Key
streamlit run webui.py --server.maxUploadSize=2048

Método 2: Despliegue con Docker

git clone https://github.com/linyqh/NarratoAI.git
cd NarratoAI
docker-compose up -d

Flujo de uso

1. Configuración básica: acceda a http://localhost:8501, configure la API Key y seleccione el modelo de IA

2. Subir vídeo: coloque el archivo mp4 en el directorio resource/videos (el nombre del archivo no puede contener caracteres chinos ni especiales)

3. Generar guion: la IA analiza automáticamente el contenido del vídeo y genera el guion de comentarios

4. Previsualización y ajustes: compruebe si los fragmentos y los comentarios coinciden, puede regenerar las partes que no le satisfagan

5. Configurar parámetros: establezca la relación de aspecto del vídeo, el estilo de locución, el estilo de subtítulos, etc.

6. Generar vídeo: haga clic en iniciar y espere a que la IA complete automáticamente la edición, la locución y la síntesis de subtítulos

❓ Preguntas frecuentes

P1: ¿Por qué no se reconocen los nombres de archivo de vídeo en chino?

R: El sistema tiene restricciones sobre los nombres de archivo, se recomienda utilizar nombres en inglés, números o guiones bajos, evitando caracteres chinos, espacios y caracteres especiales.

P2: ¿Qué modelos de IA admite NarratoAI?

R: Actualmente admite Google Gemini, Alibaba Qwen2-VL, DeepSeek R1/V3, etc. Para el análisis de vídeo se recomienda utilizar los modelos de la serie Qwen.

P3: ¿Se pueden usar comercialmente los vídeos generados?

R: Hay que tener en cuenta los derechos de autor del material de vídeo original. Para los permisos de uso comercial del contenido generado por IA, se recomienda consultar los términos específicos del servicio del modelo utilizado.

P4: ¿Qué hacer si el resultado de la edición no es satisfactorio?

R: Puede regenerar individualmente un fragmento concreto durante la fase de previsualización, o editar manualmente el guion para ajustarlo.

P5: ¿Admite la exportación a Jianying?

R: Las versiones futuras tienen previsto admitir la función de exportar borradores de Jianying.

P6: ¿Es seguro el despliegue remoto?

R: Se utiliza tecnología de cifrado avanzada para garantizar la seguridad de la transmisión y el almacenamiento de datos, pero se recomienda obtener el software a través de los canales oficiales.

🔗 Enlaces relacionados

Repositorio de GitHub:https://github.com/linyqh/NarratoAI

Documentación oficial:https://www.narratoai.cn/

Documentación de la API: tras el despliegue, acceda a http://localhost:8080/docs