Tencent Hunyuan3D-2에서 출시한 5가지 오픈소스 3D 모델, 각각의 특징은? 198

小编 ·

Tencent Hunyuan3D-2에서 출시한 5가지 오픈소스 3D 모델, 각각의 특징은?

Hunyuan3D 2는 Tencent에서 출시한先进的 대규모 3D 에셋 생성 시스템으로, 텍스트나 이미지로부터 고해상도 텍스처 3D 모델을 생성할 수 있습니다.

Tencent Hunyuan3D-2에서 출시한 5가지 오픈소스 3D 모델, 각각의 특징은?

Hunyuan3D-2이란 무엇인가요?

Hunyuan3D 2는 텐센트(腾讯)가推出的한 대규모 3D 자산 생성 시스템으로, 텍스트나 이미지로부터 고해상도의 텍스처가 적용된 3D 모델을 생성할 수 있습니다.

teaser.webp

Hunyuan3D-2 핵심 기능

  • 2단계 생성 프로세스: 먼저 지오메트리 모델을 생성한 다음, 그 지오메트리 모델에 텍스처 맵을 합성하는 2단계 생성 방식을 채택합니다. 이러한 방식은 형상 생성과 텍스처 생성의 난점을 효과적으로 분리하는 동시에, 생성되거나 수작업으로 만들어진 지오메트리 모델에 텍스처를 적용하는 데에도 유연성을 제공합니다.

  • 고품질 생성: 사실적인 3D 모델을 생성할 수 있으며, 생성된 텍스처와 지오메트리 디테일의 품질이 높아 기존의 오픈소스 및 클로즈드소스 모델을 능급합니다.

  • 다양한 출력: 물체, 캐릭터, 환경 등 다양한 유형의 3D 자산을 생성할 수 있습니다.

  • 빠른 생성: 성능이 최적화되어 모델을 빠르게 생성할 수 있으며, 작업 효율을 높입니다.

Hunyuan3D-2 오픈소스 모델 특징

Hunyuan3D-2开源模型特点.webp

핵심 모델

Hunyuan3D-DiT-v2-0

  • 고충실도 지오메트리 생성: 플로우 디퓨전 기반의 디퓨전 모델로, 주어진 이미지 프롬프트에 따라 고충실도·고해상도의 텍스처 없는 지오메트리 모델을 생성할 수 있습니다.

  • 정확한 정렬: 생성된 지오메트리 모델이 입력 이미지와 정확히 일치하여 다운스트림 애플리케이션을 위한 견고한 토대를 마련합니다.

  • 하이브리드 네트워크 구조: 듀얼 스트림과 싱글 스트림의 하이브리드 네트워크 구조를 채택하여 생성 효과를 향상시켰습니다.

  • 파라미터 수: 모델 파라미터 수는 26억 개입니다.

Hunyuan3D-Paint-v2-0

  • 고해상도 텍스처 합성: 생성된 지오메트리 모델 또는 수작업으로 제작된 메시에 대해 고해상도이고 생생한 사실적 텍스처 맵을 생성할 수 있습니다.

  • 다중 시점 디퓨전 기술: 지오메트리 조건(법선 맵 및 포지션 맵 등)을 결합하여 다중 시점 이미지를 생성하고 고해상도 텍스처로 베이크합니다.

  • 파라미터 수: 모델 파라미터 수는 13억 개입니다.

Hunyuan3D-Delight-v2-0

  • 이미지 라이팅 제거 처리: 입력 이미지를 광원 영향이 없는 상태로 변환하여 조명에 불변하는 텍스처 맵을 생성합니다.

  • 텍스처 품질 향상: 라이팅을 제거함으로써 더 높은 품질의 텍스처를 생성할 수 있으며, 텍스처 생성의 전처리로 적합합니다.

  • 파라미터 수: 모델 파라미터 수는 13억 개입니다.

Hunyuan3D-2开源模型生成效果.webp

확장 모델

Hunyuan3D-DiT-v2-0-Fast

  • 가속 버전: 가이드 디스틸레이션(지식 증류) 기술을 통해 추론 시간을 절반으로 단축하여 생성 속도에 더 높은 요구가 있는 시나리오에 적합합니다.

  • 효율적 생성: 생성 품질을 유지하는 동시에 생성 속도를 현저히 향상시켰습니다.

Hunyuan3D-2mv

  • 다중 시점 형상 생성: 다중 시점 입력을 통해 고품질의 3D 지오메트리 형상을 생성하는 데 집중합니다.

  • 복잡한 장면에 적합: 여러 각도에서 장면이나 객체를 이해해야 하는 3D 창작에 적합합니다.

Hunyuan3D-2mini

  • 경량 버전: 핵심 기능을 유지하면서 모델 크기와 계산 효율을 최적화했습니다.

  • 경량 애플리케이션에 적합: 리소스가 제한된 모바일 단말이나 경량 디바이스 등 리소스에 제약이 있는 시나리오에 더 적합합니다.

Hunyuan3D-2 활용 분야

  • 게임 개발: 캐릭터, 소품, 장면 등 고품질의 3D 게임 자산을 빠르게 생성할 수 있습니다.

  • UGC 소셜 및 콘텐츠 창작: 사용자 생성 콘텐츠를 지원하며, 사용자는 텍스트 설명, 이미지 또는 스케치를 통해 개인화된 3D 모델을 빠르게 생성할 수 있습니다.

  • 이커머스 및 광고: 상품 이미지에 따라 고정밀의 3D 상품 모델을 빠르게 생성하여 온라인 전시와 인터랙션에 활용할 수 있습니다.

  • 산업 제조 및 디자인: 디자인 스케치나 컨셉 이미지를 바탕으로 3D 산업 제품 프로토타입을 빠르게 생성하며, 다양한 포맷을 지원하여 3D 프린팅도구와 매끄럽게 연동됩니다.

  • 교육 및 연구: 오픈소스 모델과 코드를 제공하여 교육자와 연구자가 수업과 연구에 활용할 수 있도록 합니다.

Hunyuan3D-2의 추론 코드, 모델 체크포인트, 기술 보고서 등은 모두 오픈소스로 공개되었습니다.

프로젝트 공식 사이트: https://3d-models.hunyuan.tencent.com

Github 저장소: https://github.com/Tencent/Hunyuan3D-2

HuggingFace 모델 라이브러리: https://huggingface.co/tencent/Hunyuan3D-2