Auto-Video-Generateor: ИИ-генератор видео с автоматическим озвучиванием 210

Auto-Video-Generateor — это генератор видео с автоматическим озвучиванием на основе ИИ. Достаточно задать тему, и система автоматически создаст видео с закадровым голосом: введённый текст темы обрабатывается LLM для генерации сюжета или текста озвучки, затем вызывается интерфейс синтеза речи для создания голосовой дорожки и интерфейс генерации изображений по тексту для создания подходящих иллюстраций, после чего голос и изображения объединяются в готовое видео с озвучкой.

Шаги автоматической генерации видео в Auto-Video-Generateor:

Для реализации этой системы требуется несколько шагов: генерация текста сюжета, разбиение на предложения, синтез речи, генерация изображений по тексту, создание видео, а также организация взаимодействия с помощью Gradio.

Шаг 1: Генерация текста сюжета. Для простоты сначала вручную создадим пример текста сюжета.

Шаг 2: Разбиение на предложения. С помощью библиотеки re или инструментов обработки естественного языка разбиваем текст на предложения.

Шаг 3: Синтез речи. Используем библиотеку pyttsx3 или другие модели синтеза речи.

Шаг 4: Генерация изображений по тексту. Используем библиотеку pillow или другие модели text-to-image для создания картинок.

Шаг 5: Создание видео. С помощью библиотеки moviepy объединяем изображения и аудио в видео.

Шаг 6: Реализация интерактивного интерфейса с помощью Gradio. Создаём простой интерфейс взаимодействия с использованием библиотеки gradio.

Способы попробовать Auto-Video-Generateor:

1. Официальный адрес для тестирования: http://avg.kddbot.com/

2. Репозиторий исходного кода на GitHub: https://github.com/kuangdd2024/auto-video-generateor

3. Отсканируйте QR-код, чтобы подписаться на официальный аккаунт WeChat «趣聊机器人» (QuLiao Robot), и оцените возможности проекта:

В диалоговом окне «趣聊机器人» (QuLiao Robot) введите фразу «自动视频生成账密获取» (без кавычек), чтобы получить логин и пароль.

Генерация видео может занимать довольно много времени, поэтому просим набраться терпения. Также можно через некоторое время воспользоваться кнопками «加载参数» (загрузить параметры) и «加载资源» (загрузить ресурсы), чтобы загрузить уже сгенерированные видеоматериалы.

Если вместо изображений появляются картинки с текстом, возможно, в фоновом режиме при генерации изображений произошла ошибка и они были заменены текстовыми изображениями — в таком случае попробуйте повторить попытку позже.