天工SkyMusic 161

天工SkyMusic — это модель генерации ai-музыки, выпущенная компанией Kunlun Tech. Она создана на базе супермодели Kunlun Tech «Tiangong 3.0» и является единственной публично доступной крупной моделью генерации AI-музыки в Китае. 天工SkyMusic использует архитектуру, аналогичную модели Sora в области музыкального аудио: Large-scale Transformer отвечает за создание мелодий, изучая контекстные зависимости Music Patches и одновременно обеспечивая управляемость музыки.

Официальный сайт 天工SkyMusic: music.tiangong.cn

Пять ключевых функциональных особенностей 天工SkyMusic:

• Высококачественная AI-музыка: способна генерировать AI-песни длительностью 80 секунд с частотой дискретизации 44100 Гц в двухканальном стереоформате, а также создавать песни в стиле, соответствующем введённому пользователем тексту.

• Вокал, неотличимый от настоящего: синтез вокала — наиболее важное измерение в генерации AI-музыки, которое наилучшим образом отражает качество и эффективность генерации.

• Контроль над разделами текста песни: пользователи могут чётко различать эмоциональные изменения в разных частях текста песни.

• Разнообразие музыкальных стилей: поддержка множества музыкальных стилей для удовлетворения различных музыкальных потребностей пользователей.

• Интеллектуальное музыкальное самовыражение: выражение эмоций через музыку, включая обучение вокальным приёмам и т. д.

Эти особенности в совокупности формируют основные функции 天工SkyMusic, придавая ей значительное преимущество в области AI-музыки. Благодаря этим особенностям 天工SkyMusic может генерировать песни в стиле, соответствующем введённому пользователем тексту, поддерживает множество музыкальных жанров, таких как рэп, фолк, фанк, китайский стиль (гуфэн), электронная музыка и другие, а также способна обучаться различным вокальным приёмам, включая вибрато, оперное пение, речитатив, мужской и женский дуэт, автоматическую гармонизацию и многое другое.

Основные сценарии применения 天工SkyMusic:

• Высококачественная генерация AI-музыки, синтез вокала, контроль над разделами текста песни, разнообразие музыкальных стилей и интеллектуальное музыкальное самовыражение — все эти функции направлены на то, чтобы помочь пользователям лучше создавать музыку и выражать эмоции.

• Сервис может генерировать песни в стиле, соответствующем введённому пользователем тексту, поддерживает 31 язык, включая китайский, английский, японский, корейский, французский и другие, а также позволяет создавать тексты песен на основе мелодий и креативных материалов, и работает с множеством мировых музыкальных жанров.

• 天工SkyMusic также способна обучаться различным вокальным приёмам, таким как вибрато, оперное пение, речитатив, мужской и женский дуэт, автоматическая гармонизация и другие, позволяя созданным пользователями песням получить более точное эмоциональное выражение.

Она также применяется в индустрии культуры и туризма. Например, в сотрудничестве с Управлением культуры и туризма района Дунчэн города Пекина на основе AI-модели музыки «Tiangong Yuefu» была сгенерирована цифровая песня года «К востоку от Запретного города», которая глубоко объединяет культурное наследие с технологиями AIGC, создавая уникальную музыку с элементами национального тренда (гочао).

Таким образом, основной сценарий применения 天工SkyMusic — предоставление платформы, позволяющей пользователям использовать технологии AI для создания высококачественных музыкальных произведений, а также применение в конкретных культурных и туристических проектах для передачи определённой культурной информации или эмоций через музыку.

Как пользоваться 天工SkyMusic?

Использование 天工SkyMusic для создания AI-музыки и синтеза вокала включает следующие основные шаги:

1. Ознакомление с базовыми функциями 天工SkyMusic: прежде всего, необходимо знать, что 天工SkyMusic — это крупная модель генерации AI-музыки, созданная на базе супермодели Kunlun Tech «Tiangong 3.0», способная генерировать высококачественную AI-музыку и выполнять синтез вокала. Она поддерживает генерацию AI-песен длительностью 80 секунд с частотой дискретизации 44100 Гц в двухканальном стереоформате, а также создаёт песни в стиле, соответствующем введённому пользователем тексту [2].

2. Участие в бесплатном тестировании: в настоящее время 天工SkyMusic открыла бесплатное тестирование для общества, предоставив 1000 бесплатных мест, ориентированных в основном на отраслевые СМИ, экспертов и заинтересованных специалистов в области музыки. Пользователи могут подать заявку на участие в тестировании, отсканировав QR-код или заполнив форму на веб-странице.

3. Использование функции генерации AI-музыки: после подачи заявки на тестирование пользователи могут воспользоваться функцией генерации AI-музыки 天工SkyMusic. Она включает высококачественную генерацию AI-музыки, синтез вокала, контроль над разделами текста песни, разнообразие музыкальных стилей и интеллектуальное музыкальное самовыражение. В зависимости от своих потребностей пользователи могут ввести текст песни или выбрать определённый музыкальный стиль, и 天工SkyMusic автоматически сгенерирует соответствующее музыкальное произведение.

4. Тестирование технологии синтеза вокала: технология синтеза AI-вокала в 天工SkyMusic достигает ведущего в отрасли уровня SOTA, демонстрирует превосходное качество для китайского языка с чётким произношением и без посторонних шумов. Пользователи могут попробовать преобразовать желаемый контент в текст песни, а затем позволить 天工SkyMusic выполнить синтез вокала, получив голос, неотличимый от настоящего.

5. Исследование дополнительных расширенных функций: помимо базовых функций генерации музыки и синтеза вокала, 天工SkyMusic также предлагает расширенные возможности, такие как контроль над разделами текста песни и выбор множества музыкальных стилей. Пользователи могут в соответствии со своими творческими замыслами дальше исследовать и использовать эти расширенные функции для обогащения и совершенствования своих музыкальных произведений.

Запуск 天工SkyMusic знаменует приход «момента ChatGPT» в музыке, открывая новые возможности для создания музыки и позволяя партнёрам быстро получать высококачественные музыкальные произведения без необходимости вкладывать значительное время и усилия в процесс создания музыки.