Meta, 차세대 3D 기반 모델 AssetGen 2.0 발표 91

AssetGen 2.0이란 무엇인가요?

Meta에서推出的 AssetGen 2.0는 새로운 3D 模型 생성도구입니다. 텍스트 또는 이미지 프롬프트를 통해 정교하고 사실적인 3D 모델과 텍스처를 빠르게 제작할 수 있습니다. AssetGen 2.0은 단일 단계 3D 확산 기술을 사용하여 생성 과정을 더 단순화하고 모델의 형태와 텍스처의 조화를 더 좋게 만들었습니다. Meta는 이 도구를 통해 3D 콘텐츠 제작을 2D 콘텐츠 제작처럼 쉽게 만들어 누구나 가상 세계를 구축할 수 있게 하고자 합니다. 또한 Meta는 앞으로 한 번에 전체 3D 장면을 생성할 수 있는 새로운 기능을 개발 중이며, 이를 통해 3D 콘텐츠 창작을 더욱 대중화할 계획입니다.

AssetGen 2.0 기능

AssetGen 2.0은 텍스트 및 이미지 프롬프트를 고품질 3D 자산으로 변환하도록 설계된 생성형 모델로, Meta 내부에서研发한 두 개의 하위 모델로 구성되어 있습니다. 하나는 3D 메시(meshes) 생성용이고, 다른 하나는 텍스처(textures) 생성용입니다.

기술 아키텍처

• 단일 단계 3D 확산 모델: AssetGen 1.0과 달리, AssetGen 2.0은 단일 단계 3D 확산 모델을 채택하여 먼저 2D 뷰를 생성한 후 처리하는 대신 텍스트 프롬프트에서 직접 3D 메시를 생성합니다. 이러한 아키텍처는 기하학적 일관성과 정교한 디테일을 가진 3D 자산을 생성할 수 있게 합니다.

• 텍스처 생성 개선: AssetGen 2.0에는 고품질 텍스처를 생성하기 위해 업그레이드된 TextureGen 모델이 포함되어 있습니다. 새로운 모델은 뷰 일관성, 텍스처 복원, 텍스처 해상도 측면에서 개선되었습니다.

적용 시나리오

• 3D 세계 구축: Meta는 현재 내부적으로 AssetGen 2.0을 사용하여 3D 가상 세계를 구축하고 있으며, 올해 말에 Horizon 제작자 및 Meta Horizon Desktop 편집기로推广할 계획입니다.

• 전체 3D 장면 생성: Meta는 또한 향후 몇 개월 내에 AssetGen 2.0 기반의 전체 3D 장면 생성 기능을 출시하여 제작자가 간단한 텍스트 또는 이미지 프롬프트를 통해 복잡한 가상 환경을 빠르게 생성할 수 있도록 할 계획입니다.

AssetGen 2.0은 AssetGen 1.0 대비 어떤 개선이 있나요?

AssetGen 1.0을 계승한基础上, AssetGen 2.0은 3D 생성형 ai 연구에서 중대한 돌파구를实现했습니다. 단일 단계 3D 확산 모델(single-stage 3D diffusion model)을 채택하여 3D 메시의 디테일 표현력과 사실감을 크게 향상시켰으며,配套된 TextureGen 모델은 자산이 시각적으로 인상적일 뿐만 아니라 고품질 텍스처를 갖추어 생산 환경 요구를 충족할 수 있게 합니다. 이 모델은 기하학적 구조의 일관성을 유지하면서도 극도로 정교한 디테일을 보유합니다. AssetGen 1.0과 달리 기하학적 모델링 측면에서 3D 확산 메커니즘을 채택하고 대규모 3D 자산 말뭉치에서 훈련되었으며, 텍스처 생성 측면에서는 시점 일관성 강화, 텍스처 복원, 더 높은 해상도의 텍스처 생성 등 새로운 기술을 도입했습니다.

또한, AssetGen 2.0이 생성한 3D 자산은 디테일과 충실도 측면에서 AssetGen 1.0 대비 더욱 현저한 향상을 보여주며, 정교한 기하학적 디테일을 가진 자산을 생성할 수 있습니다.

자세히 보기:https://developers.meta.com/horizon/blog/AssetGen2