Veo: Google의 강력한 생성형 비디오 모델 169

Google Veo는迄今为止 우리가 만든 가장 강력한 동영상 생성 모델입니다. 1분 이상의 고품질 1080p 해상도 영화를 생성할 수 있으며, 다양한 영화적 및 시각적 스타일을 지원합니다.

프롬프트의 미묘한 차이와 톤을 정확하게 포착하며, 역사상 전례 없는 수준의 창의적 제어를 제공합니다. 타임랩스나 항공 샷 등 다양한 영화 기법에 대한 프롬프트도 이해합니다.

우리의 동영상 생성 모델은 누구나 동영상 제작을 할 수 있게 해주는 도구를 만드는 데 도움이 될 것입니다. 노련한 영화 제작자이든, 야심 찬 크리에이터이든, 지식을 공유하고자 하는 교육자이든, Google Veo는 스토리텔링, 교육 등에 새로운 가능성을 가져다줄 것입니다.

앞으로 몇 주 이내에 이러한 기능 중 일부는 Labs.google의 새로운 실험 도구인 VideoFX를 통해 선정된 크리에이터들에게 제공될 예정입니다. 지금 대기 목록에 등록하실 수 있습니다.

앞으로 Google Veo의 일부 기능을 YouTube Shorts 및 기타 제품에도 도입할 예정입니다.

Google Veo 기능 특징:

언어와 시각에 대한 더 나은 이해:

일관된 장면을 생성하기 위해, 동영상 생성 모델은 텍스트 프롬프트를 정확하게 해석하고 해당 정보를 관련 시각적 참조와 결합할 수 있어야 합니다.

자연어와 시각 의미에 대한 깊은 이해를 바탕으로, Google Veo는 프롬프트를 충실히 따르는 영상을 생성합니다. 문장의 미묘한 뉘앙스와 어조를 정확하게 포착하여 복잡한 장면에서도 정교한 디테일을 표현합니다.

영화 제작 제어:

입력 영상과 편집 명령이 함께 제공될 때, 예를 들어 해안선 항공 샷에 카약을 추가하는 명령이 주어지면, Google Veo는 이 명령을 초기 영상에 적용하여 새로운 편집 영상을 만들 수 있습니다.

또한, 마스크 편집도 지원하여 영상과 텍스트 프롬프트에 마스크 영역을 추가하면 영상의 특정 부분을 변경할 수 있습니다.

Google Veo는 이미지와 텍스트 프롬프트를 입력으로 받아 하나의 영상을 생성할 수도 있습니다. 참조 이미지와 텍스트 프롬프트를 함께 제공함으로써, Google Veo가 이미지의 스타일과 사용자의 프롬프트 지시를 따르는 영상을 생성하도록 할 수 있습니다.

이 모델은 또한 동영상 클립을 생성하여 60초 이상으로 연장할 수 있습니다. 이 작업은 하나의 프롬프트로도 가능하며, 이야기를 함께 풀어내는 일련의 프롬프트를 제공하여도 가능합니다.

동영상 프레임 간의 일관성

시각적 일관성을 유지하는 것은 동영상 생성 모델에게 큰 도전 과제입니다. 캐릭터, 물체, 심지어 전체 장면이 프레임 사이에서 깜박거리거나, 점프하거나, 뜻대로 변형되어 시청 경험을 망칠 수 있습니다.

Google Veo의 최첨단 잠재 확산 트랜스포머는 이러한 불일치의 발생을 줄여, 캐릭터, 물체, 스타일이 현실에서처럼 적절한 위치에 유지되도록 합니다.

수년간의 동영상 생성 연구를 기반으로

Google Veo는 생성 쿼리 네트워크(GQN), DVD-GAN, Imagen-Video, Phenaki, WALT, VideoPoet, Lumiere와 같은 수년간의 생성형 동영상 모델 연구와, 우리의 트랜스포머 아키텍처, 그리고 Gemini를 기반으로 구축되었습니다.

Google Veo가 프롬프트를 더 정확하게 이해하고 따르도록 하기 위해, 우리는 학습 데이터에 있는 각 영상의 캡션에 더 자세한 정보를 추가했습니다. 성능을 더욱 향상시키기 위해, 이 모델은 고품질의 압축된 영상 표현(잠재 이미지라고도 함)을 사용하므로 더 효율적입니다. 이러한 단계들은 전체적인 품질을 높이고 영상을 생성하는 데 필요한 시간을 줄여줍니다.