Voice-Pro: многоязычный инструмент обработки аудио с субтитрами, переводом и синтезом речи 274

Voice-Pro — это многоязычный инструмент для обработки аудио, объединяющий субтитры, перевод и TTS, с установкой в один клик.

Voice-Pro поддерживает перевод в реальном времени на более чем 90 языках, что подходит для трансляций или сценариев мгновенного перевода.

Основные функции Voice-Pro:

Вкладка Studio

• Предоставляет интегрированную среду для загрузчика YouTube, шумоподавления, субтитров, перевода и TTS

• Поддерживаются все видео/аудиоформаты, которые поддерживает ffmpeg

• Можно выбрать формат выходного аудио (wav, flac, mp3)

• Распознавание речи и создание субтитров для 100 языков

• Выбор параметров создания субтитров в зависимости от производительности ПК (модель Whisper и тип вычислений)

• Перевод на более чем 100 языков и озвучивание с помощью TTS

• В многоязычных видео сохраняются оригинальные BGM и звуковые эффекты.

• Поддержка регулировки скорости, громкости и тона TTS-озвучки

Вкладка Whisper Caption

• Вкладка, предназначенная специально для создания субтитров. Поддерживает более 90 языков

• Отображение субтитров, созданных из видео

• Предоставляет функции мирового уровня

• Предоставляет функции шумоподавления (1-Demucs, 2-MDXNet)

Вкладка Translate

• Специальная вкладка для перевода. Поддерживает более 100 языков

• Поддерживает файлы субтитров (ass, ssa, srt, mpl2, tmp, vtt, microdvd, json)

• Также можно вводить текст напрямую

• Автоматическое определение языка загруженного файла

Вкладка TTS

• Вкладка только для TTS. Поддерживает более 100 языков и 400 голосов

• Поддерживает файлы субтитров (ass, ssa, srt, mpl2, tmp, vtt, microdvd, json)

• Также можно вводить текст напрямую

• Автоматическое определение языка загруженного файла

• Регулируемые тон, громкость и скорость

Вкладка Live Translation

• Поддержка распознавания речи и перевода в реальном времени

• Выбор источника аудио, например микрофона, динамиков и т. д.

• Предоставляет функции сохранения захваченного аудио, распознанных и переведённых субтитров

Вкладка Batch

• Пакетная обработка большого количества файлов

• Субтитры, перевод, TTS

Особенности Voice-Pro:

• Вы можете загружать видео с YouTube (mp4, webm) и сохранять их как аудиофайлы (mp3, wav, flac).

• Вы можете повысить точность распознавания речи, устраняя шум и разделяя голос. Используются MDX-Net и Demucs от Meta.

• С помощью ИИ-распознавания речи предоставляются автоматическое создание субтитров, машинный перевод и функции TTS.

• Вы можете легко создавать многоязычные видео.

• Установка в один клик. После установки вы можете пользоваться постоянно без дополнительной платы. (※ Бесплатная версия имеет ограничение по времени использования в 30 минут)

• Предоставляется Web-UI. Рекомендуется использовать браузер Google Chrome.

Адрес проекта Voice-Pro:https://github.com/abus-aikorea/voice-pro