GPT-SoVITS: фреймворк для преобразования голоса с открытым исходным кодом 128

GPT-SoVITS — этофреймворк для клонирования голоса и преобразования текста в речь с открытым исходным кодом на Python, использующий RAG. Всего за 1 минуту голоса можно обучить собственную модель TTS. Идеальное клонирование вашего голоса! GPT-SoVITS отлично адаптирован для китайского языка и на данный момент является одной из лучших моделей с поддержкой китайского.

Адрес релиза на GitHub: https://github.com/RVC-Boss/GPT-SoVITS

Основные особенности GPT-SoVITS:

1. TTS с нулевой выборкой: введите 5-секундный образец голоса, чтобы мгновенно преобразовать текст в речь.

2. TTS с небольшой выборкой: для тонкой настройки модели требуется всего 1 минута обучающих данных, что повышает сходство голоса и реалистичность. Имитируемый голос будет ближе к оригиналу и звучать более естественно.

Поддержка разных языков: вывод возможен на языках, отличных от языка обучающего набора; в настоящее время поддерживаются английский, японский и китайский.

3. Инструменты WebUI: интегрированные инструменты включают отделение вокала от аккомпанемента, автоматическое разделение обучающего набора, китайский ASR и разметку текста, помогающие новичкам создавать обучающие наборы данных и модели GPT/SoVITS.

4. Совместимость с различными операционными системами: проект можно устанавливать и запускать на разных операционных системах, включая Windows.

5. Предобученные модели: проект предоставляет несколько уже обученных моделей, которые можно сразу скачать и использовать.

Как использовать GPT-SoVITS?

Если вы пользователь Windows (тестировалось на win>=10), вы можете выполнить установку напрямую через готовый архив. Просто скачайте готовый архив, распакуйте его и дважды щёлкните go-webui.bat, чтобы запустить GPT-SoVITS-WebUI.

GPT-SoVITS — это мощныйинструмент для клонирования голоса и преобразования текста в речь, который позволяет выполнять клонирование голоса с нулевой и небольшой выборкой, а также межъязыковое преобразование текста в речь. Он отличается небольшим объёмом данных, высоким качеством, гибкостью и простотой использования и может применяться во множестве сценариев. Если вас заинтересовал GPT-SoVITS, подробные инструкции можно найти на странице проекта с открытым исходным кодом, а также соответствующие руководства доступны на Bilibili.