AniSora: 빌리빌리에서 오픈소스로 공개한 최첨단 애니메이션 영상 생성 모델 168

AniSora(Index-AniSora)는 Bilibili에서 오픈소스로 공개한 애니메이션 영상 생성 모델로, '2차원 세계에 바치는 오픈소스 선물'이라 불립니다. 현재 가장 강력한 오픈소스 애니메이션 영상 생성 모델로, 애니메이션 콘텐츠 제작에 특화된 최적화를 제공합니다.

#Ai工具箱 #Ai视频生成

방문 AniSora: 빌리빌리에서 오픈소스로 공개한 최첨단 애니메이션 영상 생성 모델

AniSora: 빌리빌리에서 오픈소스로 공개한 최첨단 애니메이션 영상 생성 모델소개

AniSora란 무엇인가요?

AniSora(전체 이름 Index-AniSora)는 비리비리(B站)가 오픈소스로 공개한 애니메이션 비디오 생성 모델로, "이차원 세계에 바치는 오픈소스 선물"이라고 불립니다. 현재 가장 강력한 오픈소스 애니메이션 비디오 생성 모델이며, 애니메이션 콘텐츠 제작에 특화된 최적화가 이루어졌습니다.

프로젝트는 2025년 5월에 공식 출시되어 오픈소스로 공개되었으며, Apache 2.0 라이선스를 사용하여 개인 및 상업적 용도로 모두 무료로 사용할 수 있습니다. AniSora는 IJCai'25 국제 학술 회의에서 논문이 인정받아 애니메이션 비디오 생성의 새로운 기술적 돌파구를 대표합니다.

8AniSora

버전演进

V1.0: CogVideoX-5B 모델 기반, 부분 영역 제어 및 시계열 제어 가능

V2.0: Wan2.1-14B 모델로 변경, 생성 효과가 더 안정적

V3.0(2025년 7월 출시): 생성 품질과 동작의 부드러움이 향상되었으며, 양자화 버전은 단일 4090으로 추론 가능

AniSora 핵심 기능 특징

다양한 스타일 비디오 생성: 아일본 애니메이션, 중국산 창작 애니메이션, 만화改编, VTuber 콘텐츠, 애니메이션 PV, 까치 조작(MAD) 등 90% 이상의 애니메이션 비디오 장면을 제작할 수 있음
이미지-비디오 생성(I2V): 한 장의 이미지만으로 연속적인 애니메이션을 생성하며, 캐릭터 디테일과 스타일이 유지됨
프레임 보간: 키프레임을 제공하면 자동으로 중간 프레임을 보간하여 전환을 더 부드럽게 만들고, 중간 프레임을 많이 그리지 않아도 됨
시공간 마스크 제어: 시간과 공간을 정밀하게 제어할 수 있으며, 예를 들어 첫 프레임, 끝 프레임, 임의의 중간 프레임을 지정하거나 특정 부분만 움직이게 할 수 있음
다중 모달 유도: 텍스트, 이미지, 마스크를 동시에 입력하여 복잡한 장면을 제작할 수 있음
스타일 변환: 한 가지 애니메이션 스타일을 다른 스타일로 변환할 수 있음
RLHF 최적화: 강화 학습과 인간 피드백으로 학습되었으며, 3만 개의 수동 레이블링된 데이터를 사용, 인간의 취향에 더 부합하는 출력
하드웨어 적응: NVIDIA GPU와 화웨이 승騰(Ascend) 910B NPU를 기본 지원, 추론 속도가 약 20% 더 빠름

AniSora 활용 시나리오

애니메이션 콘텐츠 제작: 아일본 애니메이션 클립, 중국산 창작 애니메이션을 빠르게 제작; 만화를 비디오로改编하고 자동으로 립싱크 및 동작 추가; 애니메이션 예고편 또는 단편 애니메이션 제작
버추얼 유튜버(VTuber): 실시간으로 캐릭터 애니메이션과 배경 생성, 라이브 스트리밍 및 비디오를 더 보기 좋게 만듦
애니메이션 제작 지원: 전문 애니메이터가 키프레임을 보간하고 부분 수정, 중간 프레임을 그리지 않아도 되어 효율성 향상
2차 창작 및 까치 조작(鬼畜): 팬의 창작과 까치 애니메이션 제작을 지원, 이차원에 활력을 더함
게임 및 교육: 게임 애니메이션 자료를 빠르게 제작; 교육용 애니메이션 제작
독립 창작자 지원: 진입 장벽을 낮추어 소규모 팀도 적은 비용으로 고품질 애니메이션 제작 가능

AniSora 사용 방법

방법 1: 로컬 배포

1. 환경 준비: Python 및 딥러닝 프레임워크(예: PyTorch) 설치; 하드웨어는 NVIDIA GPU(RTX 4090 이상 권장) 또는 화웨이 승騰 910B NPU 필요
2. 모델 가져오기: GitHub 저장소 복제(git clone https://github.com/bilibili/Index-anisora); 모델 가중치는 Hugging Face에서 다운로드(약 8GB)
3. 생성 실행: 텍스트 설명 또는 단일 이미지를 입력으로 준비; 매개변수 조정(비디오 길이, 스타일 강도, 동작 범위, 시드 값 등); 생성 스크립트 실행 후 결과 대기(V3에서 4초 비디오 생성 약 2.5분 소요)
4. 후속 조정: 제공된 제어 기능을 사용하여 결과 미세 조정

방법 2: ComfyUI 플러그인

ComfyUI-WanVideoWrapper 플러그인 설치; 커뮤니티 공유 워크플로 사용: [애니메이션 전용] AniWan텍스트-비디오 생성 1280 고화질 솔루션, [애니메이션 전용] AniWan이미지-비디오 생성 1280 고화질 솔루션

방법 3: 온라인 체험

공식 데모 웹사이트 방문: www.anisora.ai

❓ 자주 묻는 질문

Q1: AniSora는 Sora, Keling 등 범용 모델과 어떻게 다른가요?

A: 범용 모델(예: OpenAI Sora, Kling)은 자연 장면과 실제 인물 비디오에 능숙하지만, 애니메이션의 과장된 표현과 비현실적인 렌더링에는 약합니다. AniSora는 애니메이션에 특화되어 최적화되었으며, 캐릭터 일관성, 동작의 부드러움, "이차원 맛"이 더 뛰어납니다.

Q2: 생성된 비디오의 해상도와 길이에 제한이 있나요?

A: V3은 최대 1080p를 지원합니다. 길이는 조정 가능하며, 일반적으로 4-5초의 짧은 콘텐츠를 만들며, 시계열 제어로 더 길게 만들 수 있습니다.

Q3: 하드웨어 요구 사항이 높은가요?

A: V3 양자화 버전은 단일 RTX 4090으로 추론 가능. 단일 4-GPU 4090에서 5초 360p 비디오 생성 시 30초 소요; 단일 8-GPU A800은 단 8초 소요. V2 대비 아티팩트가 약 15% 감소.

Q4: 학습 데이터셋은 어떻게 얻나요?

A: 팀이 고품질 학습 데이터셋 신청 채널을 개설했으며, 신청서를 작성하여 지정된 이메일(예: [email protected])로 보내면 V2.0 가중치와 전체 데이터셋 권한을 받을 수 있습니다.

Q5: 어떤 애니메이션 스타일을 지원하나요?

A: 일본 애니메이션, 중국산 창작 애니메이션, 만화改编, VTuber 콘텐츠, 개그 애니메이션(鬼畜) 등을 지원하며, 90%의 애니메이션 비디오 장면을 포괄합니다.

Q6: 생성 결과가 불안정하면 어떻게 하나요?

A: 권장 사항: 이미지-비디오 생성 시 선명한 이미지 사용; 동작과 장면을 자세히 설명하는 상세한 텍스트 프롬프트 작성; 시드 값 조정으로 결과 일관성 유지; 시작/끝 프레임 유도로 비디오 방향 제어