AniSora: передовая модель генерации аниме-видео с открытым исходным кодом от Bilibili 173

AniSora (Index-AniSora) — это модель генерации аниме-видео с открытым исходным кодом от Bilibili, которую называют «подарком миру аниме в open source». Это самая мощная на сегодня модель генерации аниме-видео с открытым исходным кодом, специально оптимизированная для создания аниме-контента.

#Ai工具箱 #Ai视频生成

Перейти AniSora: передовая модель генерации аниме-видео с открытым исходным кодом от Bilibili

AniSora: передовая модель генерации аниме-видео с открытым исходным кодом от BilibiliОписание

Что такое AniSora?

AniSora (полное название Index-AniSora) — это открытая модель генерации аниме-видео от Bilibili (станция B), которую называют «подарком с открытым исходным кодом для мира двумерной культуры». Это самая мощная на данный момент открытая модель генерации аниме-видео, специально оптимизированная для создания аниме-контента.

Проект был официально выпущен и открыт в мае 2025 года под лицензией Apache 2.0, что позволяет бесплатное использование как в личных, так и в коммерческих целях. AniSora получила признание на международной академической конференции IJCai'25, представляя новый технологический прорыв в области генерации аниме-видео.

8AniSora

Эволюция версий

V1.0: основана на модели CogVideoX-5B, поддерживает управление локальными областями и временное управление

V2.0: переход на модель Wan2.1-14B, более стабильное качество генерации

V3.0 (выпущена в июле 2025 года): улучшенное качество генерации и плавность движений, квантованная версия позволяет выполнять инференс на одной карте 4090

Ключевые особенности AniSora

Генерация видео в различных стилях: поддерживает более 90% сценариев аниме-видео, включая сериалы, оригинальную китайскую анимацию, экранизации манги, контент VTuber, аниме-PV, гуйчу (MAD) и другое
Генерация видео из изображения (I2V): достаточно одного изображения для создания связной анимации с сохранением деталей персонажа и стиля
Интерполяция кадров: достаточно указать ключевые кадры, и модель автоматически заполнит промежуточные, обеспечивая плавные переходы и избавляя от необходимости рисовать множество промежуточных кадров
Управление пространственно-временной маской: точное управление временем и пространством, например, фиксация первого, последнего или любого промежуточного кадра, а также анимация только определённых областей
Мультимодальное управление: возможность одновременного использования текста, изображений и масок для создания сложных сцен
Перенос стиля: преобразование одного аниме-стиля в другой
Оптимизация с помощью RLHF: обучена с использованием обучения с подкреплением и обратной связью от человека на 30 000 размеченных вручную данных, что делает результаты более соответствующими человеческим предпочтениям
Аппаратная совместимость: нативная поддержка NVIDIA GPU и Huawei Ascend 910B NPU, инференс примерно на 20% быстрее

Сценарии применения AniSora

Создание аниме-контента: быстрое создание фрагментов сериалов и оригинальной китайской анимации; преобразование манги в видео с автоматической синхронизацией губ и движений; создание анимационных трейлеров или короткометражек
Виртуальные ведущие (VTuber): генерация анимации персонажей и фонов в реальном времени, делая трансляции и видео более привлекательными
Помощь в производстве анимации: помощь профессиональным аниматорам в заполнении ключевых кадров и редактировании отдельных областей, избавляя от необходимости рисовать промежуточные кадры и повышая эффективность
Фан-творчество и гуйчу: поддержка фанатского творчества и гуйчу-анимации, придавая жизненность двумерной культуре
Игры и образование: быстрое создание анимационных материалов для игр; создание образовательной анимации
Поддержка независимых авторов: снижение порога входа, позволяя небольшим командам создавать качественную анимацию с минимальными затратами

Как использовать AniSora

Способ 1: Локальное развёртывание

1. Подготовка среды: установите Python и фреймворк глубокого обучения (например, PyTorch); требуется оборудование с NVIDIA GPU (рекомендуется RTX 4090 или выше) или Huawei Ascend 910B NPU
2. Получение модели: клонируйте репозиторий GitHub (git clone https://github.com/bilibili/Index-anisora); веса модели загрузите с Hugging Face (около 8 ГБ)
3. Запуск генерации: подготовьте текстовое описание или одно изображение в качестве входных данных; настройте параметры (длину видео, интенсивность стиля, амплитуду движения, значение сида и т.д.); запустите скрипт генерации и дождитесь результата (V3 генерирует 4-секундное видео примерно за 2,5 минуты)
4. Постобработка: используйте предоставленные функции управления для тонкой настройки результата

Способ 2: Плагин ComfyUI

Установите плагин ComfyUI-WanVideoWrapper; используйте рабочие процессы, опубликованные сообществом: 【Для аниме】AniWan генерация видео из текста в высоком качестве 1280, 【Для аниме】AniWan генерация видео из изображения в высоком качестве 1280

Способ 3: Онлайн-использование

Перейдите на официальный демонстрационный сайт: www.anisora.ai

❓ Часто задаваемые вопросы

В1: Чем AniSora отличается от универсальных моделей, таких как Sora и Kling?

О: Универсальные модели (например, OpenAI Sora, Kling) хорошо справляются с натуральными сценами и видео с реальными людьми, но испытывают трудности с преувеличенной аниме-выразительностью и ненатуральным рендерингом. AniSora специально оптимизирована для аниме, обеспечивая согласованность персонажей, плавность движений и более выраженный «дух двумерности».

В2: Есть ли ограничения по разрешению и длительности генерируемого видео?

О: V3 поддерживает разрешение до 1080p. Длительность можно настраивать, обычно создаются короткие видео по 4-5 секунд, а с помощью временного управления её можно увеличить.

В3: Высокие ли требования к оборудованию?

О: Квантованная версия V3 работает на одной карте RTX 4090. Генерация 5-секундного видео 360p на одной машине с 4 картами 4090 занимает 30 секунд; на одной машине с 8 картами A800 — всего 8 секунд. Количество артефактов снижено примерно на 15% по сравнению с V2.

В4: Как получить обучающий набор данных?

О: Команда открыла канал подачи заявок на доступ к высококачественным обучающим наборам данных: заполните форму заявки и отправьте её на указанный email (например, [email protected]), и вы получите веса V2.0 и полный доступ к набору данных.

В5: Какие аниме-стили поддерживаются?

О: Поддерживаются японская анимация, оригинальная китайская анимация, экранизации манги, контент VTuber, пародийная анимация (гуйчу) и другое, охватывая 90% сценариев аниме-видео.

В6: Что делать, если результаты генерации нестабильны?

О: Рекомендации: при генерации из изображения используйте чёткое изображение; пишите подробные текстовые подсказки, чётко описывающие действия и сцену; подбирайте значение сида для согласованности результатов; используйте управление первым и последним кадрами для контроля развития видео