MotionAgent: универсальный инструмент для генерации видео 111

MotionAgent — это инструмент на основе модели глубокого обучения, способный генерировать видео по сценариям, созданным пользователями. С помощью предоставляемого нами набора инструментов можно создавать сценарии, генерировать кадры, создавать изображения/видео, а также сочинять фоновую музыку.

При этом модель Tongyi Qianwen-7B помогает генерировать качественные сценарии, модель генерации изображений по тексту создаёт кинокадры, а основная модель I2VGen-XL преобразует эти кадры в видео. Наконец, модель генерации музыки позволяет создавать нужную фоновую музыку.

С помощью MotionAgent пользователи могут легко воплотить свои творческие замыслы в реальность.

Функциональные возможности MotionAgent

1. Генерация сценариев (Script Generation)

Пользователь задаёт тему и сеттинг истории, после чего генерируется сценарий. Модель генерации сценариев основана на LLM (например, Qwen-7B-Chat), и MotionAgent способен создавать сценарии в самых разных стилях.

2. Генерация кинокадров (Movie still Generation)

Вводя сцену из сценария, пользователь получает с помощью MotionAgent соответствующее изображение кинокадра.

3. Генерация видео (Video Generation)

Генерация видео по изображению, поддерживается создание видео в высоком разрешении.

4. Генерация музыки (Music Generation)

MotionAgent позволяет создавать фоновую музыку в заданном стиле.