Gen-3 Alpha: новое поколение модели генерации видео от Runway 195

Runway представила новое поколение модели генерации видео Gen-3 Alpha, которая обеспечивает точное управление временем. Gen-3 отличается более высокой точностью воспроизведения и согласованностью, способна генерировать выразительных и реалистичных персонажей с широким спектром движений, жестов и эмоций, открывая новые возможности для повествования.

Gen-3 Alpha обладает очевидными преимуществами в таких областях, как мультимодальное обучение, разнообразные генеративные инструменты, точное управление временем, высококачественная генерация изображений и видео, расширенные режимы управления, а также эффективные вычислительные и архитектуры хранения данных.

Gen-3 Alpha — первая из серии моделей, которые Runway вскоре обучит на новой инфраструктуре, созданной для крупномасштабного мультимодального обучения. По сравнению с Gen-2 достигнуты значительные улучшения в точности воспроизведения, согласованности и движении, что также является шагом к созданию универсальной модели мира.

Функции Gen-3 Alpha:

• Высокая точность воспроизведения и управляемость: по сравнению с предыдущим поколением модели Gen-3 Alpha демонстрирует заметные улучшения в точности, согласованности и качестве движения, позволяя генерировать более реалистичный и плавный видеоконтент.

• Поддержка мультимодального ввода: Gen-3 Alpha поддерживает множество способов создания контента, включая преобразование текста в видео, изображения в видео, текста в изображение и другие, предоставляя разнообразные варианты для творчества.

• Точное временное управление: Gen-3 Alpha обеспечивает точные переходы между сценами, делая смену кадров более естественной и плавной.

• Генерация реалистичных персонажей: Gen-3 Alpha способна создавать реалистичных человеческих персонажей с богатой мимикой и движениями, отлично справляясь с генерацией различных действий, жестов и эмоций.

• Поддержка отраслевой настройки: Gen-3 Alpha поддерживает индивидуальную настройку под конкретную отрасль, позволяя реализовать более стилизованное управление и согласованных персонажей, а также функции, ориентированные на конкретные художественные и повествовательные требования.

• Крупномасштабное мультимодальное обучение: эта серия моделей обучена на новой инфраструктуре, созданной для масштабного мультимодального обучения.

• Фотореалистичный эффект: Gen-3 Alpha может генерировать реалистичные видеоролики фотореалистичного качества.

Подробное описание проекта Gen-3 Alpha:https://runwayml.com/blog/introducing-gen-3-alpha/