Mureka O1: первая в мире музыкальная рассуждающая модель от Kunlun Tech 161

Что такое Mureka O1?

Mureka O1 — первая в мире музыкальная рассуждающая большая модель, выпущенная компанией Kunlun Wanwei. Она использует технологию цепочки рассуждений (Chain of Thought), позволяющую через многоэтапное рассуждение и структурированную генерацию создавать высококачественные музыкальные произведения. Поддерживает множество языков, жанров и эмоциональных выражений, обладает функциями клонирования тембра и референсного трека, отличается высокой скоростью генерации и низкой задержкой. Открытый API и сервис дообучения модели обеспечивают мощную поддержку ai для таких областей, как создание музыки, продакшн, образование и развлечения.

Технические принципы

• Технология цепочки рассуждений (Chain of Thought, CoT): имитирует многошаговый мыслительный процесс человека, разбивая сложные задачи генерации музыки на несколько последовательных этапов рассуждения. Модель способна к более глубокому осмыслению и самооптимизации при создании музыки, что повышает качество и связность композиций.

• Многоэтапное рассуждение: модель сначала выполняет предварительное создание, а затем в последующих итерациях постоянно пересматривает и оптимизирует предыдущие результаты, формируя в итоге высококачественное музыкальное произведение.

• Структурированная генерация: в отличие от традиционных авторегрессионных моделей, которые генерируют аудио пошагово, Mureka O1 сначала формирует общую музыкальную структуру, а затем предсказывает тонкие аудио-токены, что значительно повышает структурную связность музыки и точность инструментовки.

• На основе модели CLAP: не требует ручной разметки, обладает высокой масштабируемостью, улучшает интерпретируемость и качество генерируемой музыки.

• Оптимизация с помощью обучения с подкреплением: производительность модели оптимизируется посредством непрерывной проверки и исправления ошибок, например, через самооптимизацию на основе заданных функций вознаграждения (качество музыки, стилистическая согласованность и т. д.).

• Стратегический оптимизатор: включает методы сжатия градиентов, исследования и эксплуатации, что повышает эффективность обучения и качество генерации.

• Разнообразные источники данных: обучающие данные включают синтетические данные, размеченные данные от экспертов-людей, базу данных цепочек рассуждений (CoT Dataset) и другие материалы, обеспечивая модели богатый учебный материал.

Функциональные особенности Mureka O1

• Мультиязычная поддержка: поддерживает создание текстов песен и генерацию инструментальной музыки на 10 языках (английский, китайский, японский, корейский, французский, испанский, португальский, немецкий, итальянский, русский).

• Множество жанров и эмоциональных выражений: охватывает такие жанры, как джаз, электронная музыка, поп, кантри, ритм-н-блюз, соул, блюз, рок, танцевальная музыка, а также разнообразные эмоции — радость, свобода, загадочность, энергичность, грусть и другие.

• Функция референсного трека: пользователи могут загружать аудиофайлы или ссылки YouTube в качестве подсказки для создания музыки.

• Функция клонирования тембра: пользователи могут выбирать из множества официальных тембров исполнителей или загружать собственный голос, чтобы ИИ изучил и воспроизвёл его, создавая персонализированные уникальные произведения.

• Генерация музыки с низкой задержкой: обеспечивает лидирующую в отрасли низкую задержку при генерации музыки, предоставляя мгновенный и высококачественный пользовательский опыт.

• Открытый API и дообучение модели: предоставляются API для генерации музыкального аудио и API синтеза речи с поддержкой различных входных данных, а также открыт сервис дообучения на базе Mureka V6.

Показатели производительности

Превосходит Suno V4: в субъективных и объективных оценках Mureka O1 заметно превосходит Suno V4 по качеству вокала, фоновой музыки и сведения; также значительно улучшены показатели богатства аранжировки, структуры композиции и качества мелодии.

Более высокая скорость генерации: скорость создания полной песни вдвое выше, чем у Suno V4, что обеспечивает пользователям более эффективный творческий процесс.

Руководство по использованию Mureka O1

• Перейдите на официальный сайт: откройте официальный сайт Mureka .

• Регистрация аккаунта: зарегистрируйтесь и войдите с помощью аккаунта Google.

• Выберите режим создания:

  Простой режим: введите описание песни длиной до 300 символов, например «Песня, наполненная искренними чувствами, выражающая глубокую тоску по другу», и нажмите «Создать».

  Расширенный режим: предлагает больше возможностей для творчества — загрузку референсного трека, выбор тембра исполнителя, ввод текста песни, выбор музыкального стиля и настроения и т. д.

• Выберите модель: нажмите, чтобы выбрать модель Mureka O1 или Mureka V6.

• Сгенерируйте музыку: нажмите «Create» и дождитесь генерации.

• Экспорт: после генерации трек можно прослушать, скачать, поделиться им или выполнить его дальнейшее редактирование.

Сценарии применения Mureka O1

• Создание музыки: помощь в написании мелодий и текстов, источник вдохновения.

• Музыкальный продакшн: генерация саундтреков для фильмов, рекламы и игр.

• Музыкальное образование: использование в качестве учебного инструмента для генерации аккомпанемента для упражнений.

• Музыкальные развлечения: создание персонализированных плейлистов, интерактивный опыт.

• Реклама и маркетинг: создание эксклюзивной музыки для рекламы и брендов.

• Разработка игр: генерация динамической музыки в реальном времени в зависимости от игровой сцены.

• Кинопроизводство: создание саундтреков и вставных композиций для фильмов и сериалов.

• Корпоративные мероприятия: создание музыки для событий и продвижения бренда.

Официальный сайт: https://www.mureka.ai/