视界一粟 YiSu: Sora급 비디오 생성 대형 모델 121

视界一粟YiSu는 베이징 쟈오지아 사이지(北京极佳视界)科技有限公司와 칭화대학교 자동화학과가 공동 발표한 Sora급, 고가성비, 디바이스端에서 사용 가능한 Sora급 비디오 생성 대형 모델인 시제이이수(视界一粟) YiSu입니다. 시제이이수 YiSu는 자체 개발 기술에 기반하여 LLM과 확산 모델을 융합하고, 강력한 멀티모달 융합 능력을 보여줍니다. 2024년 6월 11일, 치지(奇绩) 창탄 로드쇼 데이에서 정식으로 발표되었습니다.

视界一粟YiSu 프로젝트 웹사이트：https://world-dreamer.github.io/

Github 주소：https://github.com/JeffWang987/WorldDreamer

视界一粟YiSu 기능：

• 초장시간：모델은 기본적으로 16초의 비디오 생성을 지원하며, 1분 이상까지 확장할 수 있습니다.

• 고성능：초대형의 동작 범위와 매우 강한 표현력을 갖추고 있으며, 물리적 세계를 이해할 수 있어 생성된 비디오가 더욱 사실적이고 자연스럽습니다.

• 디바이스端에서 사용 가능：모델은 클라우드 지원 없이 단말 장치에서 직접 실행할 수 있습니다.

• 물리적 세계를 이해：모델은 물리적 세계의 법칙을 이해하고 시뮬레이션할 수 있습니다.

• 저비용과 고효율：YiSu 모델은 운영 비용이 더 낮고, 추론 속도도 더 빠르며, 단말 장치에도 적합합니다.

• 지속적인 반복 개선：该模型将按照每周一个小版本、每月一个大版本的迭代速度进行快速成长和进化，未来几个月内将在视频时长、可控性、推理速度、运行成本、理解物理世界等方面迎来大幅度的提升。→ 이 모델은 매주 한 차례의 마이너 버전, 매월 한 차례의 메이저 버전의 반복 속도에 따라 빠르게 성장하고 진화하며, 앞으로 몇 개월 내에 비디오 길이, 제어 가능성, 추론 속도, 운영 비용, 물리적 세계 이해 등의 측면에서 큰 폭의 향상을 맞이할 것입니다.

视界一粟YiSu 기술 특징

• 자체 개발 아키텍처：LLM과 확산 모델을 융합한 자체 개발 아키텍처로, 다양한 기술 라인의 장점을 결합합니다.

• 멀티모달 융합：멀티모달 데이터 처리 측면에서 최적화되었습니다.

• 훈련 효율 및 추론 효율：모델은 훈련 및 추론 효율성 측면에서 최적화되었습니다.

• 모델 효과：비디오 품질과 효과 측면에서 최적화되었습니다.

视界一粟 YiSu 응용 시나리오：

엔터테인먼트와 미디어：

애니메이션 제작：애니메이션 시퀀스를 자동 생성하여 애니메이션 제작 프로세스를 가속화합니다.

뮤직 비디오：독특한 뮤직 비디오 콘텐츠를 창작합니다.

특수 효과 제작：영화 및 TV 드라마의 특수 효과 장면을 생성합니다.

교육과 훈련：

인터랙티브 교육：인터랙티브한 교육용 비디오를 제작하여 학습 경험을 향상시킵니다.

시뮬레이션 실험：가상 실험실 환경을 구축하여 과학 실험 시연을 진행합니다.

광고와 마케팅：

광고 아이디어：눈길을 끄는 광고 비디오를 빠르게 생성합니다.

제품展示：제품 소개 및 시연용 비디오를 제작합니다.

소셜 네트워크：

사용자 생성 콘텐츠：사용자가 고품질의 소셜 미디어 비디오를 쉽게 제작할 수 있도록 지원합니다.

가상 아이돌：라이브 방송이나 상호작용을 위한 가상 인물을 생성합니다.

전자 상거래：

상품展示：상품의 360도展示 비디오를 생성합니다.

고객 피드백：제품에 대한 사용자의 사용 및 평가를 시뮬레이션합니다.

자율 주행과 로봇：

시뮬레이션 훈련：자율 주행 시스템과 로봇에 시뮬레이션 훈련 데이터를 제공합니다.

환경 인지：차량과 로봇의 주변 환경 이해 능력을 강화합니다.

게임 개발：

게임 예고편：게임 예고편과 홍보 비디오를 자동 생성합니다.

게임 콘텐츠 생성：게임 내 애니메이션과 스토리 콘텐츠를 창작합니다.

가상 현실(VR)과 증강 현실(AR)‌：

VR 콘텐츠 제작：가상 현실 애플리케이션에 풍부한 시각 콘텐츠를 제공합니다.

AR 경험 강화：증강 현실 애플리케이션의 시각 효과를 강화합니다.

보안 모니터링：

이벤트 시뮬레이션：훈련 및 교육을 위한 보안 이벤트를 시뮬레이션합니다.

비디오 분석：비디오 모니터링 시스템의 분석 능력을 강화합니다.

의료 건강：

의학 교육：해부학 및 수술 과정의 교육용 비디오를 제작합니다.

환자 교육：환자에게 질병과 치료에 대한 시각적 설명을 제공합니다.

베이징 쟈오지아 사이지(北京极佳视界)科技有限公司는 ai 대형 모델에 주력하는 스타트업으로, 회사 핵심 멤버는 칭화대학교, 중국과학원 등 유수 대학 및 마이크로소프트, 알리바바, 바이두 등 유명 기업에서 왔으며, 업계 선도적인 AI 기술과 응용 경험을 보유하고 있습니다.