Runway выпускает модель нового поколения Gen-4: точность, захват движения и согласованность сцен 145

Что такое Gen-4?

Gen-4 — это новое поколение генеративной модели ai, официально представленное Runway 31 марта 2025 года. По сравнению с предыдущей версией, она демонстрирует заметные улучшения в точности генерации видео, захвате динамических движений, согласованности сцен, а также в понимании и выполнении пользовательских инструкций. Модель способна создавать высокосогласованный и реалистичный видеоконтент, используя визуальные референсы и текстовые инструкции, поддерживает генерацию в различных разрешениях и с разных ракурсов, обладает высокой скоростью работы и подходит для кинопроизводства, разработки игр, рекламы, создания контента для социальных сетей и других сценариев.

Технологические прорывы Gen-4

• Повышенная точность: Gen-4 достигает ведущего в отрасли уровня точности в генерации видео, обеспечивая детализированную проработку деталей и точную цветопередачу. По сравнению с версией Gen-3Alpha скорость генерации увеличена на 35%, что стало возможным благодаря оптимизации фреймворка глубокого обучения.

• Захват динамических движений: Gen-4 совершила значительный прогресс в захвате динамических движений. Её уникальный алгоритм способен в реальном времени анализировать сложные траектории движения, что делает сгенерированное видео более естественным и реалистичным при воспроизведении динамических эффектов.

• Высокая согласованность: Gen-4 решает проблему согласованности сцен — будь то основные персонажи, объекты в видео или общий художественный стиль, всё остаётся высокосогласованным и единообразным.

• Точное понимание и выполнение: Gen-4 глубже понимает вводимые пользователем промпты и точнее их выполняет, обладает передовыми способностями «понимания мира», благодаря чему сгенерированный контент лучше соответствует логике и физическим законам.

Функциональные особенности Gen-4

• Сочетание визуальных референсов и инструкций: Gen-4 способна создавать новые изображения и видео, используя визуальные референсы (например, изображения или видео) в сочетании с текстовыми инструкциями, обеспечивая непрерывность контента и контроль пользователя над развитием сюжета.

• Генерация с нескольких ракурсов: пользователи могут указать различные ракурсы и положения, и Gen-4 сгенерирует сцену с нескольких точек обзора.

• Различные разрешения на выходе: Gen-4 поддерживает множество разрешений видео, включая 16:9, 9:16, 1:1, 4:3, 3:4 и 21:9.

Сценарии применения Gen-4

• Кинопроизводство: Gen-4 способна генерировать видеоконтент с чрезвычайно реалистичными траекториями движения и высокой динамикой, открывая новые возможности для кинопроизводства. Например, команда Runway с помощью Gen-4 создала короткометражные фильмы «The Lonely Little Flame» и «New York is a Zoo», продемонстрировав мощный потенциал повествования и визуальных эффектов.

• Разработка игр: высокая согласованность и способность захвата динамических движений Gen-4 позволяют быстро генерировать высококачественный видеоконтент для игр и сокращать производственный цикл.

• Реклама: Gen-4 способна быстро генерировать рекламные видеоролики в соответствии с потребностями пользователей.

• Создание контента для социальных сетей: Gen-4 помогает авторам быстро создавать короткие видеоролики в различных стилях.

Функция генерации видео из изображений Gen-4 уже официально доступна всем платным пользователям Runway и корпоративным клиентам, на данный момент Gen-4 поддерживает генерацию видео длительностью 5 и 10 секунд.

Подробности: https://runwayml.com/gen-4-bts