融光:基于Agent的全流程AI视频创作平台_云技派

融光:基于Agent的全流程AI视频创作平台_云技派 234

一款开源、基于Agent架构的全流程AI视频创作工具,它把输入的文字剧本自动拆解成结构化分镜,再调用多家主流AI模型生成配图和视频片段,从剧本编写到视频生成做到了自动化。

#Ai工具箱 #Ai开源项目

融光:基于Agent的全流程AI视频创作平台_云技派소개

融光(융광)이란 무엇인가

融光은 오픈소스이며 Agent 아키텍처 기반의 전 과정(全流程) ai 단편 드라마 창작 도구로, 대본 작성부터 영상 생성까지 자동화를 실현했습니다. 주로 콘텐츠 크리에이터를 대상으로 하며, 입력한 텍스트 대본을 자동으로 구조화된 스토리보드로 분해한 다음 여러 주요 AI 모델을 호출하여 스틸 이미지와 영상 클립을 생성합니다.

融光

핵심 기능

  • 대본 관리: 영상 대본의 생성 및 편집을 지원하며, 회차별, 장면별로 구조화된 관리가 가능합니다.

  • AI 스토리보드 생성: 대본을 자동으로 시각적 스토리보드로 분해하며, 화면 설명, 카메라 무브먼트 언어 등의 정보를 포함합니다.

  • AI 이미지 생성: 여러 AI 이미지 생성 엔진을 통합하여, 원클릭으로 스토리보드 참고 이미지를 생성할 수 있습니다.

  • AI 영상 생성: 스토리보드 설명과 참고 이미지에 따라 해당 영상 클립을 생성합니다.

  • 소재 관리: 프로젝트 내의 이미지, 영상 등 소재를 통합 관리합니다.

  • 다중 모델 지원: OpenAI, Claude, Gemini, 通义千问, DeepSeek, Ollama 등 주요 대형 모델을 통합했습니다.

  • 시각화 Agent 워크플로우: Pipeline 노드를 시각적으로 표시하여, 창작 과정을 투명하게 제어할 수 있습니다.

기술 아키텍처

  • 백엔드: Java 21 + Spring Boot 3.5 + Spring AI

  • 프론트엔드: Next.js 16 + React 19 + TypeScript

  • 데이터베이스: MySQL + Redis

  • 스토리지: 로컬 스토리지, 阿里云OSS, 腾讯COS, MinIO 등 S3 호환 스토리지 지원

설치 및 사용

배포 방식

Docker 원클릭 배포:

  1. Docker 환경 설치

  2. 프로젝트 저장소 클론: git clone https://github.com/Stonewuu/ai-fusion-video.git

  3. 프로젝트 루트 디렉터리에서 실행: docker compose up -d

소스 코드 로컬 개발:

  1. 환경 준비: JDK 21+, Node.js 20+, pnpm 9+, MySQL, Redis

  2. 먼저 MySQL 및 Redis 등 미들웨어를 시작

  3. 백엔드와 프론트엔드 서비스를 각각 시작

사용 흐름

  1. 새 프로젝트를 생성하고 대본 또는 카피를 붙여넣기

  2. "AI 스마트 분해"를 클릭하면 Agent가 자동으로 텍스트를 구조화된 스토리보드로 분할합니다.

  3. 스토리보드 에디터에서 프롬프트, 카메라 무브먼트 파라미터를 미세 조정

  4. 워크플로우를 실행하면 Agent가 자동으로 참고 이미지 생성을 스케줄링 → 선택 및 잠금 → 영상 클립 생성

  5. 시스템이 모든 클립을 자동으로 이어 붙여 완성 영상을 내보냅니다.

적용 시나리오

  • 숏폼 영상 제작:自媒体(미디어 셀프미디어) 대량 생산

  • 광고 마케팅: 다중 버전 광고 스토리보드의 빠른 반복

  • 교육 트레이닝: 강의大纲(강의 개요)을 자동 분해하여 시각화 코스 클립 생성

  • 영화·드라마 프리비주얼: 독립 제작자가 빠르게 스토리보드와 동적 프리비주얼 생성

  • 애니메이션 프로토타입: 서사 리듬과 비주얼 스타일 검증

融光의 장점

  • 전 과정 자동화: 대본부터 완성 영상까지 완전한 워크플로우를 포괄하여 수작업을 줄입니다.

  • 다중 모델 호환성: 단일 AI 서비스 제공업체에 종속되지 않으며, 주요 대형 모델의 유연한 전환을 지원합니다.

  • 오픈소스 및 커스터마이즈 가능: 프라이빗 배포와 깊은 기능 확장을 지원합니다.

  • 스토리보드 기반 생성: 스토리보드를 중간층으로 삼아, 영상 콘텐츠와 대본 의도의 일치를 보장합니다.

火宝短剧와의 비교

비교 항목融光火宝短剧
제품 포지셔닝오픈소스 전 과정 AI 영상 창작 플랫폼AI 기반 단편 드라마 자동 제작 플랫폼
오픈소스 라이선스MIT License (자유로운 상업적 이용 가능)CC BY-NC-SA 4.0 (상업적 이용 제한)
기술 아키텍처Java (Spring Boot) + Node.jsGo + Vue3
핵심 특징다중 모델 호환, 스토리보드 기반, 워크플로우 시각화캐릭터 일관성 관리, 대본에서 영상까지 높은 자동화
데이터베이스MySQLSQLite (기본)

Github: https://github.com/Stonewuu/ai-fusion-video

融光:基于Agent的全流程AI视频创作平台_云技派 와 관련된 도구