Tongyi Wanxiang — большая модель генерации видео с помощью ИИ 128

Тунъи Ваньсян — это AI-генератор видео, разработанная Alibaba Cloud самостоятельно модель для генерации видео, представленная на конференции Yunqi 19 сентября 2024 года. Она способна создавать видео кинематографического качества в высоком разрешении на основе текстовых подсказок. Модель поддерживает функции генерации видео по тексту и генерации видео по изображению. Пользователю достаточно ввести текст или загрузить изображение, чтобы быстро получить динамический видеоконтент.

Модель AI-видео Тунъи Ваньсян обладает мощными возможностями генерации визуальной динамики изображения, превосходно понимает концепции и комбинирует генерацию, легко справляется с множеством художественных стилей, оптимизирует отображение элементов китайской культуры, обеспечивает кинематографическое качество картинки, а также поддерживает многоязыковую генерацию и генерацию с переменным разрешением.

Основные функциональные особенности модели AI-видео Тунъи Ваньсян:

Генерация видео по тексту: пользователь может ввести любую текстовую подсказку, и система автоматически сгенерирует видеоролик в высоком разрешении. Поддерживается ввод на китайском и английском языках. В режиме генерации видео по тексту введённый текст управляет содержанием изображения и процессом его изменения, а в сочетании с функцией интеллектуального расширения подсказок текст может в полной мере раскрыть воображение.

Генерация видео по изображению: пользователь может превратить любое изображение в динамическое видео. Система выполняет генерацию в соответствии с пропорциями загруженного изображения или предустановленными пропорциями, а также позволяет управлять движением в видео с помощью текстовых подсказок. Кроме того, изображение можно использовать в качестве первого кадра видео для продолжения генерации — это обеспечивает больший контроль, более точную картинку и позволяет воплотить творческий замысел пользователя в движении.

Разнообразные сценарии применения: данная технология подходит для кинематографии, анимационного дизайна, рекламного дизайна и многих других областей. Она особенно эффективна в генерации движения и физическом моделировании, способна достоверно воспроизводить физические свойства реального мира.

Высококачественный результат: модель генерации AI-видео Тунъи Ваньсян объединяет ряд инновационных технологий, оптимизирует отражение элементов традиционной китайской культуры и поддерживает генерацию видео с высокой степенью сжатия и высоким качеством.

Бесплатное использование: в настоящее время все пользователи могут бесплатно воспользоваться этой функцией через приложение Тунъи и официальный сайт, получая неограниченное количество попыток в день.

Особенности модели AI-видео Тунъи Ваньсян:

Движение, воссоздающее физический мир: мощные возможности генерации движения, поддержка сложных и масштабных движений, воспроизведение физических законов реального мира.

Семантика, превращающая воображение в реальность: встроенная поддержка длинных текстовых подсказок на китайском языке, способность понимать сложную семантику и комбинировать концепции для точного воплощения текстового творческого замысла.

Стиль, рождающий вдохновение: мощные возможности обобщения стилей — с помощью подсказок о стиле генерируется соответствующее видеоизображение, обеспечивающее кинематографическое качество картинки и проработку деталей.

Наследие, выражение содержания в национальном стиле: целенаправленная оптимизация понимания концепций и выразительности генерации элементов китайской культуры, позволяющая легко создавать видеоконтент в национальном стиле.

Использование модели генерации AI-видео Тунъи Ваньсян:

1. Генерация видео по тексту

Введите текстовую подсказку с описанием изображения и процесса движения в видео — система сгенерирует видеоролик. Поддерживаются китайский и английский языки, а также различные соотношения сторон: 16:9, 4:3, 1:1, 3:4, 9:16 и другие, что позволяет адаптировать результат к различным сценариям и устройствам.

Доступна функция расширения вдохновения: на основе краткой подсказки с помощью интеллектуального расширения можно получить более полное её описание, что значительно повышает насыщенность и выразительность видео. Пример приведён ниже

2. Генерация видео по изображению

Загрузите или перетащите изображение, которое станет первым кадром видео, и дополните его текстовым описанием движения и эффектов камеры. Загружаемое изображение можно обрезать в любых пропорциях, описание движения поддерживается на китайском и английском языках.

Загруженное изображение можно обрезать в любых пропорциях или в предустановленных пропорциях, что удобно для изменения композиции и повторного творчества, а также поддерживается вращение. Пример операции приведён ниже

Выпуск модели генерации AI-видео Тунъи Ваньсян предоставил инновационные решения для индустрий кинопроизводства, разработки игр, рекламного креатива и других отраслей. Пользователю достаточно простого текстового описания, чтобы направить ИИ на создание видеоконтента с определённым стилем и эмоциональной окраской, что значительно упрощает процесс видеопроизводства и повышает эффективность творческой работы.

Связанные новости:

Тунъи Цяньвэнь значительно снижает цены — 2 миллиона токенов за 1 юань

На маркетплейсе Promptbase появились подсказки для Sora и Тунъи Ваньсян

Alibaba Cloud выпускает большую модель Тунъи Цяньвэнь, формируя интеллектуальную экосистему