NarratoAI: комплексный ИИ-инструмент для видеообзоров и автоматического монтажа

NarratoAI: комплексный ИИ-инструмент для видеообзоров и автоматического монтажа 264

Open-source комплексный ИИ-инструмент для видеообзоров и авто-монтажа на базе LLM. Объединяет в единый автоматизированный конвейер весь процесс: написание сценария — монтаж видео — AI-озвучка — генерация субтитров.

#创作工具 #视频剪辑

NarratoAI: комплексный ИИ-инструмент для видеообзоров и автоматического монтажаОписание

📌 Что такое Narratoai

NarratoAI — это открытый автоматизированный инструмент для создания видеообзоров на основе LLM, который объединяет полный процесс «написание сценария — монтаж видео — AI-озвучка — генерация субтитров» в автоматизированную операцию. В первую очередь ориентирован на создателей коротких видео, авторов обзоров фильмов, команды MCN и операторов собственных медиа.

NarratoAI разработан пользователем GitHub linyqh, на данный момент имеет около 7K звёзд и 880 форков, поддерживает локальное развёртывание и развёртывание через Docker.

Функциональные возможности NarratoAI

✨ Функциональные возможности NarratoAI

🎬 Интеллектуальное написание сценариев: использует LLM для автоматической генерации сценариев видеообзоров с поддержкой нескольких языков

🎞️ Автоматический видеомонтаж: автоматический монтаж видео по сценарию, поддержка режима случайной склейки, возможность настройки длительности фрагментов и соотношения сторон видео (например, 9:16 вертикальный формат)

🗣️ Генерация AI-озвучки: встроенный многоязычный синтез речи TTS с возможностью регулировки громкости и скорости, различные стили голоса

📝 Интеллектуальное создание субтитров: автоматическая генерация субтитров, синхронизированных с речью, с возможностью настройки шрифта, положения, цвета и обводки

👀 Оптимизация предпросмотра контента: перед генерацией можно просмотреть временные метки фрагментов, описание кадров и соответствующий закадровый текст, поддерживается повторная генерация отдельных фрагментов

🚀 Поддержка нескольких моделей: поддержка моделей Alibaba Qwen2-VL, DeepSeek R1/V3, Google Gemini и других

💻 Поддержка различных сценариев: охватывает популярные сценарии создания контента, такие как общие обзоры фильмов, обзоры коротких сериалов, нарезки коротких сериалов

🔍 SEO-оптимизация: оптимизация структуры контента по ключевым словам для повышения видимости в поисковых системах

🎯 Сценарии применения NarratoAI

  • Создание обзоров фильмов: быстрое создание профессиональных обзоров фильмов, сериалов и коротких сериалов

  • Производство коротких видео: массовое создание контента для платформ Douyin, Kuaishou, Bilibili, Видеоаккаунтов и т.д.

  • Образовательные видео: преподаватели или учебные заведения могут быстро создавать учебные демонстрационные материалы

  • Коммерческие презентации продуктов: компании создают видеоролики о продуктах с акцентом на их особенности и преимущества

  • Медиа-операции: индивидуальные авторы могут ежедневно публиковать множество материалов, повышая влияние аккаунта

✅ Преимущества и недостатки NarratoAI

Преимущества

  • Полная автоматизация процесса: от сценария до готового ролика в один клик, полное видео генерируется за 10 минут, эффективность повышается более чем на 80%

  • Нулевой порог входа: не требуются профессиональные навыки монтажа, новички могут быстро приступить к работе

  • Минимальные затраты: монтаж 10-минутного видео стоит около 0,1 юаня (расходы на вызовы API)

  • Открытый исходный код и бесплатность: полностью бесплатное использование, прозрачный код, поддержка вторичной разработки

  • Гибкая настройка: поддержка ручной корректировки параметров для удовлетворения индивидуальных потребностей в создании контента

Недостатки

  • Зависимость от моделей: ранние версии в основном полагались на модель Google Gemini, поддержка других моделей была ограничена (в новых версиях улучшено)

  • Требования к оборудованию: видеокарта не обязательна, но требуется конфигурация с 4-ядерным CPU + 8 ГБ оперативной памяти

  • Ограничения поддержки китайского языка: в ранних версиях существуют ограничения на обработку китайскоязычного видео, имена файлов не должны содержать китайские символы, специальные символы или пробелы

  • Нестабильность результатов: автоматически сгенерированный контент может потребовать ручной доработки для достижения наилучшего результата

🛠️ Как использовать NarratoAI

Подготовка среды

  • Требования к системе: Windows 10+ / MacOS 11.0+ / Linux

  • Конфигурация оборудования: 4-ядерный CPU, 8 ГБ оперативной памяти (видеокарта не обязательна)

  • Версия Python: 3.10 или выше

Способы развёртывания (выберите один из двух)

Способ 1: Локальное развёртывание

git clone https://github.com/linyqh/NarratoAI.git
cd NarratoAI
pip install -r requirements.txt
cp config.example.toml config.toml
# Отредактируйте config.toml, вписав API Key
streamlit run webui.py --server.maxUploadSize=2048

Способ 2: Развёртывание через Docker

git clone https://github.com/linyqh/NarratoAI.git
cd NarratoAI
docker-compose up -d

Порядок использования

  1. Базовая настройка: перейдите по адресу http://localhost:8501, настройте API Key и выберите модель AI

  2. Загрузка видео: поместите файл mp4 в директорию resource/videos (имя файла не должно содержать китайские или специальные символы)

  3. Генерация сценария: AI автоматически анализирует содержимое видео и создаёт сценарий обзора

  4. Предпросмотр и корректировка: проверьте соответствие фрагментов и обзора, можно повторно сгенерировать неудовлетворительные части

  5. Настройка параметров: установите соотношение сторон видео, стиль озвучки, оформление субтитров и т.д.

  6. Генерация видео: нажмите кнопку запуска, дождитесь автоматического завершения AI монтажа, озвучки и создания субтитров

❓ Часто задаваемые вопросы

В1: Почему не распознаются имена файлов видео на китайском?

О: Система имеет ограничения на имена файлов, рекомендуется использовать английские буквы, цифры или подчёркивания, избегая китайских символов, пробелов и специальных символов.

В2: Какие модели AI поддерживает NarratoAI?

О: В настоящее время поддерживаются Google Gemini, Alibaba Qwen2-VL, DeepSeek R1/V3 и другие, для анализа видео рекомендуется использовать модели серии Qwen.

В3: Можно ли использовать сгенерированные видео в коммерческих целях?

О: Необходимо учитывать вопросы авторских прав на исходные видеоматериалы, права на коммерческое использование контента, сгенерированного AI, рекомендуется уточнять в условиях использования конкретного модельного сервиса.

В4: Что делать, если результат монтажа неудовлетворительный?

О: На этапе предпросмотра можно повторно сгенерировать отдельный фрагмент или вручную отредактировать сценарий.

В5: Поддерживается ли экспорт в Jianying (CapCut)?

О: В будущих версиях планируется поддержка экспорта черновиков Jianying.

В6: Безопасно ли удалённое развёртывание?

О: Используются передовые технологии шифрования для обеспечения безопасности передачи и хранения данных, однако рекомендуется получать программное обеспечение по официальным каналам.

🔗 Полезные ссылки

Репозиторий на GitHub: https://github.com/linyqh/NarratoAI

Официальная документация: https://www.narratoai.cn/

Документация API: после развёртывания перейдите по адресу http://localhost:8080/docs

Инструменты по теме "NarratoAI: комплексный ИИ-инструмент для видеообзоров и автоматического монтажа"