Youdao Цифровой человек 147

Цифровой человек от Youdao — это серия виртуальных персонажей, разработанная NetEase Youdao на основе технологий искусственного интеллекта, направленная на предоставление интеллектуальных и персонализированных услуг. Эти цифровые люди поддерживают множество функций, включая, помимо прочего: озвучивание фотографий и пение, перевод видео, клонирование внешности, синтез пения и взаимодействие на больших экранах.

Кроме того, цифровой человек Youdao отличается точной синхронизацией речи и движений губ, а также реалистичной мимикой. Благодаря индивидуальному обучению на основе примерно тридцатиминутной выборки данных достигается высокоточное совпадение движений губ и естественное поведение. Пользователи могут легко создавать свои виртуальные образы с помощью платформы цифровых людей с малой выборкой, которая сочетает в себе интеллектуальные и персонализированные возможности.

Функциональные особенности цифрового человека Youdao:

Быстрое и недорогое клонирование внешности

Загрузив 1-минутное видео, можно обучить цифрового двойника внешности за 30 минут. Стоимость создания индивидуального образа невысока, совпадение движений губ хорошее. Общий эффект достаточно хорош для применения в таких сценариях, как видео с закадровой озвучкой, создание учебных материалов и популяризация знаний.

Создание цифрового двойника с точной синхронизацией речи и губ и реалистичной мимикой

Используя около тридцати минут сэмплированных данных, можно обучить цифрового двойника с более высокой точностью, лучшим совпадением движений губ и более естественным поведением. Совпадение движений губ — на высшем уровне в отрасли. Подходит для сценариев использования в сферах туризма и СМИ, интерактивных экранов, корпоративной поддержки клиентов и т. д.

Создание коротких видео с цифровым человеком в один клик

Гибкое построение сцен с помощью фонов, стикеров, видео, текста и других мультимедийных элементов. Введите текст или аудио — и можно быстро создать видео, что значительно повышает эффективность производства контента. Также поддерживается синтез видео на нескольких языках и с разными голосами.

Перевод видео

Цифровой человек Youdao быстро и точно переводит текст видео, клонирует голос и изменяет движения губ. При переключении языка сохраняются тембр и стиль речи говорящего, а реалистичные движения губ и естественное выражение лица позволяют удовлетворить разнообразные потребности в переводе видео для трансграничной электронной коммерции и международного маркетинга, размещения рекламы в нескольких странах, создания видеоконтента для социальных сетей и т. д.

Интерактивный цифровой человек

Диалог в реальном времени с голосовым управлением поддерживает мгновенное онлайн-общение, обладает мощным «мозгом» и способностью к обучению. Доступен вызов через онлайн-API или автономное развёртывание.

Применение цифрового человека Youdao:

Цифровой человек Youdao использует преимущества технологий ИИ для расширения возможностей переводческих приложений, например, для обучения разговорной речи; создаёт цифровых двойников с точной синхронизацией речи и губ и реалистичной мимикой, подходящих для сценариев в сферах туризма и СМИ, интерактивных экранов, корпоративной поддержки клиентов и т. д.;

Youdao Zhiyun AI Digital Human использует полный стек технологий ИИ, включает сквозной движок рендеринга и управления цифровыми образами, поддерживает управление в реальном времени и автономный синтез, способен обеспечивать высококачественные 2D- и 3D-эффекты человекоподобного взаимодействия и подходит для розничной торговли, автомобильной отрасли, образования, государственного управления, туризма и многих других сфер.

В сфере образования Youdao запустил приложение AI Digital Human, работающее на основе образовательной модели большого размера «Цзы Юэ», которое обладает функциями взаимодействия в реальном времени, исправления грамматических ошибок, оценки и переключения тем, обеспечивая естественное общение. Кроме того, Youdao представил Hi Echo — первого в мире виртуального репетитора по разговорной речи, что ещё больше расширяет применение компании в образовательной сфере.

Эти функции в совокупности формируют ключевые возможности цифрового человека Youdao, обеспечивая эффективное и естественное интерактивное взаимодействие во многих областях. Предоставляя ряд услуг и технологий на основе искусственного интеллекта, цифровой человек Youdao не только улучшает пользовательский опыт, но и предлагает инновационные прикладные решения для множества отраслей.