Помощник сценариста▸ 
AI Приложения 
AI Новости 
Vidu: первая в Китае модель для генерации длинных, согласованных и динамичных видео
Vidu: первая в Китае модель для генерации длинных, согласованных и динамичных видеоОписание
Vidu — это крупная модель для генерации видео, разработанная компанией Shengshu Technology совместно с Университетом Цинхуа. Благодаря инновационной архитектуре U-ViT она стала первой в Китае моделью генерации видео уровня Sora. Эта модель не только является технологическим первопроходцем в мировом масштабе, но и демонстрирует подтверждённую возможность масштабирования через открытую модель UniDiffuser.
Vidu способна не только моделировать реальный физический мир, но и обладает богатым воображением, поддерживает генерацию нескольких кадров и обеспечивает высокую временно-пространственную согласованность. Модель Vidu объединяет технологии Diffusion и Transformer, а её инновационная архитектура U-ViT была разработана впервые в отрасли. Модель позволяет одним нажатием генерировать видеоконтент высокой чёткости длительностью до 16 секунд и разрешением до 1080P.
Функциональные особенности Vidu:
Архитектура модели: модель Vidu объединяет технологии Diffusion и Transformer, а её инновационная архитектура U-ViT была разработана впервые в отрасли.
Возможности генерации видео: Vidu позволяет одним нажатием генерировать видеоконтент высокой чёткости длительностью до 16 секунд и разрешением до 1080P.
Генерация 3D: на основе простого текстового ввода генерируются высококачественные, разнообразные и креативные изображения. Вызов API генерации изображений, онлайн-тестирование. Генерация персонализированных 3D-моделей на основе текстового или графического ввода | автоматическое редактирование текстур и других параметров на основе существующих 3D-моделей.
Демонстрация практического применения: в официальных материалах показан пример видео, в котором «корабль в мастерской плывёт к камере», демонстрирующий реалистичный эффект корабля и морских волн.
Расширенные возможности: Vidu способна не только моделировать реальный физический мир, но и обладает богатым воображением, поддерживает генерацию нескольких кадров и обеспечивает высокую временно-пространственную согласованность.
Пекинская компания Shengshu Technology Co., Ltd. (сокращённо «Shengshu Technology») была основана в марте 2023 года. Основные члены команды происходят из Института исследований искусственного интеллекта Университета Цинхуа; кроме того, в команду входят ведущие специалисты из таких известных технологических компаний, как Alibaba, Tencent и ByteDance. Это ведущая в мире исследовательская группа в области глубоких генеративных алгоритмов, обладающая возможностями фундаментальных инноваций в разработке моделей диффузионных вероятностных распределений. Компания стремится создавать ведущие в мире мультимодальные модели большого масштаба, объединяющие текстовую, графическую, видео- и 3D-информацию, исследуя коммерческое применение генеративного AI в художественном дизайне, создании игр, постпродакшене фильмов, создании контента и социальных сетях, повышая творческие способности и продуктивность человека с помощью ИИ.
