VIMI: 제어 가능한 인물 영상 생성 모델 135

VIMI 대모델은 상탕科技(商汤科技)에서 출시한 세계 최초의 제어 가능한 인물 동영상 생성 AIGC 제품으로, 상탕의 일일신(日日新) 대모델 기술을 기반으로 합니다. 동작 영상, 애니메이션, 음성, 텍스트 등 다양한驱动 요소를 통해 인물 사진을 구동할 수 있으며, 화면 품질이 시간의 흐름에 따라 저하되거나 왜곡되지 않고 목표 동작과 일치하는 인물 동영상을 생성합니다. 제어 가능성 외에도 Vimi는 인물 생성 안정성과 동영상 생성 시간 측면에서도 다른 대모델 AI 동영상 생성의 한계를突破하여, 분 단위의 단일 샷 인물 동영상을 안정적으로 생성할 수 있습니다.

VIMI 대모델은 정밀한 인물 표정 제어뿐만 아니라 사진 속 인물의 상반신 자연스러운肢体 동작도 제어할 수 있으며, 인물에 어울리는 머리카락, 의상 및 배경 변화를 자동으로 생성합니다. 동시에 빛과 그림자 변화도 합리적으로 생성하여 인물 동작과 시각 효과가 부드럽고 자연스러우며, 화면이 조화롭고 아름다워 안정적인 제어 가능한 인물 동영상 생성 제품입니다.

VIMI 대모델 기능 특징：

• 제어 가능한 인물：VIMI는 동영상 속 인물의 얼굴 표정과肢体 동작을 정밀하게 제어하여 목표 동작과高度 일치하는 동영상 콘텐츠를 생성할 수 있습니다. 미묘한 얼굴 표정 변화부터 복잡한全身 동작까지, VIMI는 정확하게 포착하고 재현할 수 있습니다.

• 다양한 제어 방식：VIMI는 인물 동영상, 애니메이션 매개변수, 음성 텍스트 등 다양한 제어 입력 방식을 제공합니다. 이를 통해 사용자는 다양한 입력 방법으로 동영상 생성을 구동하여 보다 풍부하고 다양한 동영상을 창작할 수 있습니다.

• 분 단위 단일 샷：분 단위의 단일 샷 인물 동영상 생성을 지원합니다.

• 합리적인 동영상 장면 생성：VIMI는 인물 자체의表现에 집중할 뿐만 아니라 인물의 머리카락, 의상, 배경 등 요소의 보완과 빛·그림자 변화 지원을 포함한 합리적인 동영상 장면을 생성할 수 있습니다. 이로 인해 VIMI가 생성한 동영상은 인물 표현이 자연스러울 뿐만 아니라 전체 장면 또한 조화롭게 통일됩니다.

• 장시간 동영상의 안정적 생성：VIMI는 최대 1분에 달하는 단일 샷 인물 동영상을 생성할 수 있으며, 화면 효과가 안정적이고 시간이 지나도 열화되거나 왜곡되지 않습니다. 이는 주목할 만한 돌파입니다.
  

VIMI 대모델 적용 시나리오：

VIMI는 주로 C端 사용자를 대상으로 하며, 채팅, 노래, 춤 등 다양한 엔터테인먼트 인터랙션 시나리오에 적합합니다.

• 엔터테인먼트 창작：디지털 아바타 생성, 화보 영상 및 다양한 재미있는 인물 표정 패키지 제작 등 광범위한 사용자의 엔터테인먼트 창작 수요를 충족합니다.

• 영화·드라마 제작：영화·드라마 작품에 고품질의 인물 동영상素材를 제공하여 제작 비용과 시간을 절감합니다.

• 애니메이션 제작：애니메이션 창작자가 골격을 사용하여 동작을 생성할 수 있도록 지원하여 애니메이션 제작 효율을 향상시킵니다.

Vimi 대모델은 2024년 세계 인공지능 대회(WAIC)에서 공개되었으며, 대회 전시의 최고 영예인 "진관지보(镇馆之宝)"에 선정되었습니다. Vimi 대모델은 1분 이상의 단일 샷 인물 동영상을 생성할 수 있으며, 화면 품질이 시간에 따라 저하되거나 왜곡되지 않고, 인물 동작에 따라 환경 장면을 조정하고 렌즈 각도 변화와 머리카락 흔들림을 모방하여 사실적인 시각 효과를 제공합니다.

Vimi는 모든 사용자에게 전면적으로 개방됩니다. 사용자는 다양한 각도의 고화질 인물 사진만 업로드하면 디지털 아바타와 다양한 스타일의 화보 영상을 자동으로 생성할 수 있습니다. 셀카를 좋아하는 사용자를 위해 Vimi는 채팅, 노래, 춤 등 다양한 엔터테인먼트 인터랙션 시나리오를 지원합니다.