ViVa AI: модель генерации видео на той же архитектуре, что и Sora 111

Зарубежный продукт ViVa ai выпустил первую модель генерации видео с той же архитектурой, что и Sora, открытую для всех пользователей. На данный момент она бесплатна.

ViVa AI поддерживает генерацию видео по тексту, генерацию видео по изображению, а также увеличение разрешения до 4K. Кроме того, поддерживается автоматическая оптимизация подсказок. ViVa AIгенерация видео по тексту позволяет за один раз создать 5-секундное видео, а генерация видео по изображению — 4-секундное.

ViVa AI, вероятно, на данный момент является моделью генерации видео с самой большой амплитудой движения, а также с самым высоким разрешением изображения среди доступных сейчас продуктов для генерации видео. Эффект генерации видео по тексту лучше, чем у генерации видео по изображению. При этом, если вы собираетесь её использовать, рекомендуется установить амплитуду движения около 20 — это наиболее подходящее значение.

Преимущество ViVa AI заключается в возможности генерировать качественное вертикальное видео. В настоящее время многие видеомодели демонстрируются в горизонтальном формате, а вертикальное видео пока получается не очень хорошо. Однако короткое вертикальное видео составляет большую часть видеоконтента, поэтому качество генерации вертикального видео является очень важным показателем.

Тем не менее в ряде тестов согласованность сохраняется не очень хорошо, при этом модель не демонстрирует столь мощного моделирования физических свойств и 3D-согласованности, как у Sora. По сравнению с недавно выпущенной моделью Veo от Google, в реалистичном контенте она уже практически на одном уровне.