融光:基于Agent的全流程AI视频创作平台_云技派

融光:基于Agent的全流程AI视频创作平台_云技派 237

一款开源、基于Agent架构的全流程AI视频创作工具,它把输入的文字剧本自动拆解成结构化分镜,再调用多家主流AI模型生成配图和视频片段,从剧本编写到视频生成做到了自动化。

#Ai工具箱 #Ai开源项目

融光:基于Agent的全流程AI视频创作平台_云技派Описание

Что такое Ронгуан

Ронгуан — это открытый инструмент для создания короткометражных драматических видео на основе архитектуры Agent, который автоматизирует весь процесс от написания сценария до генерации видео. Он в первую очередь ориентирован на создателей контента и может автоматически разбивать введённый текстовый сценарий на структурированные раскадровки, а затем вызывать несколько ведущих AI-моделей для генерации иллюстраций и видеофрагментов.

融光

Основные функции

  • Управление сценариями: поддержка создания и редактирования видеосценариев со структурированной организацией по эпизодам и сценам.

  • AI-генерация раскадровки: автоматическое разбиение сценария на визуальные раскадровки, включая описания изображений и язык кинематографической съёмки.

  • AI-рисование: интеграция нескольких AI-движков рисования для генерации референсных изображений раскадровки в один клик.

  • AI-генерация видео: создание соответствующих видеофрагментов на основе описаний раскадровки и референсных изображений.

  • Управление материалами: единое управление изображениями, видео и другими материалами в проекте.

  • Поддержка множества моделей: интеграция ведущих больших моделей, таких как OpenAI, Claude, Gemini, Tongyi Qianwen, DeepSeek, Ollama.

  • Визуальный процесс Agent: визуальное отображение узлов Pipeline, процесс создания прозрачен и контролируем.

Техническая архитектура

  • Бэкенд: Java 21 + Spring Boot 3.5 + Spring AI

  • Фронтенд: Next.js 16 + React 19 + TypeScript

  • База данных: MySQL + Redis

  • Хранилище: поддержка локального хранилища, Alibaba Cloud OSS, Tencent COS, MinIO и другого S3-совместимого хранилища

Установка и использование

Способы развёртывания

Развёртывание в один клик через Docker:

  1. Установите среду Docker

  2. Клонируйте репозиторий проекта:git clone https://github.com/Stonewuu/ai-fusion-video.git

  3. Выполните в корневой директории проекта: docker compose up -d

Локальная разработка из исходного кода:

  1. Подготовьте окружение: JDK 21+, Node.js 20+, pnpm 9+, MySQL, Redis

  2. Сначала запустите промежуточное ПО, такое как MySQL и Redis

  3. Запустите бэкенд и фронтенд сервисы отдельно

Процесс использования

  1. Создайте новый проект, вставьте сценарий или текст

  2. Нажмите «AI-интеллектуальная разбивка», Agent автоматически разделит текст на структурированные раскадровки

  3. В редакторе раскадровки точно настройте промпты и параметры движения камеры

  4. Запустите рабочий процесс: Agent автоматически планирует генерацию референсных изображений → выбор и фиксация → генерация видеофрагментов

  5. Система автоматически склеивает все фрагменты и экспортирует готовый ролик

Сценарии применения

  • Создание коротких видео: массовое производство для самомедиа

  • Реклама и маркетинг: быстрая итерация нескольких версий рекламных раскадровок

  • Образование и обучение: автоматическая разбивка учебных программ на визуальные фрагменты курса

  • Кинопробы: быстрая генерация раскадровок и динамических превизуализаций для независимых кинопроизводителей

  • Анимационные прототипы: проверка ритма повествования и визуального стиля

Преимущества Ронгуана

  • Полная автоматизация процесса: охватывает весь рабочий процесс от сценария до готового ролика, сокращая ручное вмешательство

  • Совместимость с множеством моделей: не привязан к одному AI-провайдеру, поддерживает гибкое переключение между ведущими большими моделями

  • Открытый исходный код и возможность настройки: поддержка частного развёртывания и глубокого расширения функций

  • Генерация на основе раскадровки: раскадровка как промежуточный слой обеспечивает соответствие видеоконтента замыслу сценария

Сравнение с Хобао Драма

Параметр сравненияРонгуанХобао Драма
Позиционирование продуктаОткрытая платформа для создания AI-видео с полным цикломПлатформа автоматизированного производства коротких драм на основе AI
Лицензия открытого кодаMIT License (свободное коммерческое использование)CC BY-NC-SA 4.0 (ограниченное коммерческое использование)
Техническая архитектураJava (Spring Boot) + Node.jsGo + Vue3
Ключевые особенностиСовместимость с множеством моделей, генерация на основе раскадровки, визуализация процессовУправление согласованностью персонажей, высокая автоматизация от сценария до видео
База данныхMySQLSQLite (по умолчанию)

Github:https://github.com/Stonewuu/ai-fusion-video

Инструменты по теме "融光:基于Agent的全流程AI视频创作平台_云技派"