Pixelle-Video: AI 기반 완전 자동 숏폼 비디오 엔진

Pixelle-Video: AI 기반 완전 자동 숏폼 비디오 엔진 231

AIDC-AI가 오픈소스로 공개한 ComfyUI 기반 숏폼 비디오 생성 도구입니다. 주제만 입력하면 스크립트 작성, 이미지 생성, 내레이션 합성, 비디오 출력까지 자동으로 처리해 기본적으로 수동 편집이 필요 없습니다.

#Ai工具箱 #Ai开源项目

Pixelle-Video: AI 기반 완전 자동 숏폼 비디오 엔진소개

Pixelle-Video란 무엇인가

Pixelle-Video는AIDC-AI가 오픈소스로 공개한 ComfyUI 기반의 짧은동영상 생성도구입니다. 주제만 입력하면 스크립트 작성, 화면 생성, 더빙 합성, 동영상 편집까지 자동으로 진행되므로 별도의 편집 작업이 거의 필요하지 않습니다. GPT, Tongyi Qianwen, DeepSeek 등 다양한 모델과 호환되며, 음성 클로닝과 디지털 휴먼 나레이션도 지원하여 미디어 운영자와 AI 동영상을 처음 접하는 사용자에게 적합합니다.

Pixelle-Video 공식 웹사이트 스크린샷

Pixelle-Video 공식 웹사이트 스크린샷

기능 특징

  • 완전 자동 생성 폐쇄 루프: 주제를 입력하면 시스템이 자동으로 대규모 언어 모델을 호출해 내레이션 스크립트를 생성하고, 각 문장의 카피에 AI 이미지 또는 동영상을 매칭한 뒤, 더빙과 배경 음악을 합성하여 최종 영상을 출력합니다.

  • 다중 모델 LLM 지원: 스크립트 엔진은 GPT, Tongyi Qianwen, DeepSeek, Ollama 등 백엔드를 사용할 수 있으며, 비용, 응답 속도, 콘텐츠 스타일에 따라 자유롭게 전환할 수 있고 로컬 배포 시 외부 API를 호출할 필요가 없습니다.

  • AI 비주얼 생성: FLUX, WAN 2.1 / 2.2 등 모델로 이미지와 동영상을 생성할 수 있으며, 사용자가 직접 업로드한 이미지나 영상素材を AI가 분석해配套 스크립트를 자동으로 생성할 수도 있습니다.

  • 지능형 음성 및 클로닝: Edge-TTS, Index-TTS 등 주요 음성 솔루션을 통합하고, 음성 클로닝(MP3/WAV/FLAC 레퍼런스 오디오 업로드)을 지원하며, 다국어 TTS 및 디지털 휴먼 나레이션 기능도 새로 추가되었습니다.

  • 유연한 템플릿과 크기: 정적, 이미지, 동영상 세 가지 유형의 HTML 템플릿을 제공하며, 세로, 가로, 정사각 등 다양한 화면 비율을 지원하고 사용자 정의 템플릿도 만들 수 있습니다.

  • 원자 단위 능력 자유 조합: ComfyUI 워크플로우 기반으로 이미지 생성 모델, TTS 엔진, 동영상 생성 모델을 자유롭게 교체해 개인화된 요구를 충족할 수 있습니다.

  • 액션 트랜스퍼 모듈(2026년 1월 업데이트): 레퍼런스 영상의 동작 패턴을 AI가 생성한 콘텐츠에 전이해 화면의 자연스러운 역학을 구현합니다.

활용 시나리오

  • 소셜 미디어 대량 운영: TikTok, Xiaohongshu, Instagram Reels 등 플랫폼의 지식 공유, 제품 홍보, 리뷰類 짧은 영상 대량 생산에 적합합니다.

  • 개인 크리에이터 첫 도전: 기술 배경이 없는 초보자도 Windows 원클릭 통합 패키지로 설정 없이 바로 시작해 AI 동영상 제작의 진입 장벽을 낮출 수 있습니다.

  • 소재 재창작: 기존 사진이나 영상을 업로드하면 AI가 내용을 자동으로 분석해 내레이션과 더빙을 생성, 소재에서 완성작까지 원클릭 변환을 구현합니다.

  • 다국어 콘텐츠 해외 진출: 다국어 TTS와 디지털 휴먼 나레이션을 활용해 다양한 지역 시장을 대상으로 하는 현지화 영상을 빠르게 생성합니다.

사용 방법

설치 및 배포

  • Windows 사용자: GitHub Releases에서 원클릭 통합 패키지를 다운로드해 압축을 풀고 start.bat을 더블 클릭해 웹 인터페이스를 실행합니다.

  • macOS / Linux 사용자: uv와 ffmpeg를 설치하고 저장소를 클론한 후 uv run streamlit run web/app.py를 실행합니다.

  • 최초 구성

  • 브라우저에서 http://localhost:8501을 열고 「⚙️ 시스템 구성」을 펼칩니다. LLM(모델 선택 및 API Key 입력)과 이미지 생성(ComfyUI 로컬 주소 또는 RunningHub API Key)을 구성한 뒤 저장을 클릭합니다.

동영상 생성

  1. 콘텐츠 입력: 왼쪽 사이드바에서 「AI 생성 콘텐츠」를 선택해 주제를 입력하거나 「고정 카피 콘텐츠」를 선택해 기존 스크립트를 붙여넣습니다. 내장 또는 사용자 정의 BGM을 선택할 수도 있습니다.

  2. 음성 설정: 가운데 영역에서 TTS 워크플로우(Edge-TTS / Index-TTS 등)를 선택하고, 레퍼런스 오디오를 업로드해 음성 클로닝을 수행한 뒤 미리보기로 효과를 확인할 수 있습니다.

  3. 비주얼 설정: ComfyUI 이미지/동영상 워크플로우를 선택하고, 크기와 프롬프트 접두사(영문)를 설정한 뒤, 영상 템플릿을 골라 미리봅니다.

  4. 합성 출력: 「🎬 동영상 생성」을 클릭하면 진행 상황(스크립트 → 이미지 → 음성 → 동영상)을 실시간으로 확인하고, 완료되면 자동으로 재생되어 output/ 폴더에 저장됩니다.

자주 묻는 질문

Q: 처음 사용할 때 얼마나 걸리나요?

A: 컷 수, 네트워크 환경, AI 추론 속도에 따라 다르지만 보통 몇 분 내에 완료됩니다.

Q: 결과가 마음에 들지 않으면 어떻게 조정하나요?

A: LLM 모델을 바꿔 스크립트 스타일을 조정하거나, 이미지 크기와 Prompt Prefix를 수정해 화풍을 바꾸고, TTS 워크플로우나 레퍼런스 오디오를 전환해 더빙을 조정하며, 다양한 템플릿과 화면 비율을 시도해 볼 수 있습니다.

Q: Pixelle-Video 사용 비용은 얼마인가요?

A: 프로젝트는 완전 무료方案을 지원합니다 — LLM은 Ollama(로컬) + ComfyUI 로컬 배포 = 비용 0; 추천方案은 Tongyi Qianwen(매우 저렴한 API 비용) + 로컬 ComfyUI; OpenAI와 RunningHub 클라우드方案을 사용하면 비용이 다소 높아집니다.

Q: 사용자 정의 템플릿을 지원하나요?

A: 지원합니다. HTML에 익숙한 사용자는 templates/ 폴더에서 자체 템플릿을 만들 수 있고, ComfyUI를 이해하는 사용자는 workflows/ 폴더에서 이미지 또는 TTS 워크플로우를 사용자 정의할 수 있습니다.

제품 평가

Pixelle-Video는 전통적인 편집 소프트웨어가 아니라 엔드 투 엔드 AIGC 자동화 파이프라인입니다. 가장 큰 가치는 LLM, 컴퓨터 비전, 음성 합성을 표준 워크플로우로 통합한 점이며, 동시에 ComfyUI의 모듈형 설계를 통해 높은 확장성을 유지합니다. 매일 다수의 콘텐츠를 생산해야 하는 미디어 운영자에게选题에서 완성작까지의 주기를 눈에 띄게 단축시켜 줍니다. 다만 영화 수준의 화질이나 복잡한 서사 구조를 추구한다면 자동화로 생성된 템플릿 흔적이 여전히 두드러져 부족함을 느낄 수 있습니다.

장점:

  • 오픈소스 무료(Apache-2.0), 완전 로컬화해 비용 0으로 실행 가능(Ollama + 로컬 ComfyUI)

  • Windows 원클릭 통합 패키지로 즉시 사용 가능, Python 환경 설정 불필요

  • 워크플로우가 높은 모듈형으로 구성되어 ComfyUI 생태계의 모델과 플러그인을 바로 재사용

  • 음성 클로닝과 디지털 휴먼 지원, 개인화 및 브랜드화 요구 충족

단점:

  • 로컬 실행은 하드웨어 요구 사항이 있어, NVIDIA 그래픽 카드 중 VRAM 6GB 이상 권장

  • 생성 품질은 각 AI 모델 자체 능력에 제한을 받으며, 복잡한 스크립트에서는 여전히 이미지와 텍스트 불일치가 발생할 수 있음

  • 현재는 구조가 단순한 짧은 영상에 더 적합하며, 긴 영상이나 복잡한 전환 지원은 제한적


Pixelle-Video: AI 기반 완전 자동 숏폼 비디오 엔진 와 관련된 도구