Zonos-TTS: 다국어 음성 합성 모델, 음성 클로닝 및 감정 제어 지원 238

Zonos-TTS는 Zyphraai에서 출시한 다국어 텍스트 음성 변환(TTS) 모델로, 실시간 음성 복제 및 다국어 감정 제어를 지원하며, 뛰어난 음질을 제공합니다.

Zonos-TTS 주요 기능:

• 다국어 지원: Zonos-TTS 기술 특징 모델은 영어를 지원할 뿐만 아니라 중국어를 포함한 다국어 지원도 특히 강조합니다.

• 실시간 음성 복제: Zonos의 두드러진 특징은 고정밀 음성 복제 기능으로, 5~30초의 참조 오디오만으로 화자의 목소리를 복제할 수 있습니다.

• 감정 제어 및 개인화: 사용자는 음성 출력의 감정(예: 기쁨, 공포, 슬픔, 분노 등), 말하는 속도, 음높이 변화 및 오디오 품질을 조정하여 높은 수준의 개인화된 음성 합성을 구현할 수 있습니다. 또한 텍스트 및 오디오 접두사를 통해 사용자가 화자의 오디오 임베딩이나 오디오 접두사를 제공하면 더 나은 음성 생성 효과를 얻을 수 있습니다.

Zonos-TTS 기술 특징:

• 훈련 데이터: 20만 시간의 영어 음성 데이터로 훈련되어 뛰어난 성능을 보여줍니다.

• 배포 방식: 로컬 배포와 API 서비스를 모두 지원하여 유연한 사용 방식을 제공합니다.

• 감정 및 방언 유연성: 더 세밀한 감정 제어와 억양 조정을 지원합니다.

Zonos-TTS 사용 시나리오:

• 개인화된 어시스턴트: 특정 개인의 음성을 생성합니다.

• 음성 복제: 소량의 오디오 샘플로 특정 개인의 음성을 생성할 수 있습니다.

• 교육 및 훈련: 다양한 억양과 톤의 음성을 생성하여 학습자의 언어 능력과 발음 기술을 향상시킵니다.

• 창의적인 콘텐츠 생성: 광고, 팟캐스트 및 오디오북 제작에서 고품질 음성을 활용하여 비디오의 매력을 높입니다.

ZyphraAI는 매월 100분의 오디오를 생성할 수 있는 무료 서비스를 제공하며, 프로 버전 사용자는 300분/5달러 요금제를 선택할 수 있고, 초과분은 분당 0.02달러로 청구됩니다.

GitHub: https://github.com/Zyphra/Zonos