Make-A-Character: 텍스트로 만드는 3D 디지털 휴먼 127

텍스트로 3D 디지털 휴먼을 생성하는 도구. Make-A-Character를 사용하면 텍스트 설명만으로 제어 가능하고 사실적이며 애니메이션 가능한 3D 디지털 휴먼 캐릭터를 손쉽게 만들 수 있습니다.

#Ai工具箱 #Ai开源项目

Make-A-Character: 텍스트로 만드는 3D 디지털 휴먼소개

Make-A-Character는 한 문장의 묘사를 통해 얼굴형,五官, 헤어스타일 특징을 설명함으로써, 풀스택式美術 능력을 갖춘 초고사실적인3D 디지털 휴먼을 고효율·대량으로 생성할 수 있습니다. 생성 결과에는 인체 및 머리, 액세서리와 의상이 포함되며, 표정 애니메이션 에셋을 통한 드라이빙을 지원하여 3D 디지털 휴먼이 생동감 있게 동적으로 표현될 수 있게 합니다.얼굴형, 눈 색상, 헤어스타일, 눈썹 타입, 입과 코와 같은 세부 사항은 물론 주름이나 점 등을 추가하는 등 얼굴 특징을 직접 커스터마이징할 수도 있습니다.Make-A-Character는 영어와 중국어 프롬프트를 지원합니다.

Make-A-Character 프로젝트 주소：https://human3daigc.github.io/MACH/

Make-A-Character 데모 주소：https://www.modelscope.cn/studios/XR-3D/InstructDynamicAvatar/summary

Make-A-Character 주요 특징：

1、고도한 사실감：캐릭터는 실제 인간 스캔 데이터셋을 기반으로 생성되며, 헤어스타일은 메시(mesh)가 아닌 실제 헤어 스트랜드로 표현되고, Unreal Engine의 물리 기반 렌더링(PBR) 기술로 렌더링되어 고품질 실시간 렌더링 효과를 구현합니다.

2、완전한 모델：모든 캐릭터는 눈, 혀, 치아, 전신, 의상을 포함한 완전한 모델로, 별도의 모델링 없이 바로 사용할 수 있습니다.

3、애니메이션 가능：캐릭터에는 복잡한 리그(rig)가 장착되어 표준 애니메이션을 지원하며, 사실적인 외관과 다양한 활용도를 높여줍니다.

4、뛰어난 제어성：얼굴형, 눈 색상, 헤어스타일, 눈썹 타입, 입과 코 같은 세부 특징을 자유롭게 커스터마이징할 수 있으며, 주름이나 점 등을 추가할 수도 있습니다.

5、업계 호환성：생성된 3D 캐릭터는 특히 게임 및 영화 업계에서 흔히 사용되는 파이프라인을 포함한 기존의 컴퓨터 그래픽스(CG) 워크플로우에 원활하게 통합될 수 있습니다.

Make-A-Character 원리：

Make-A-Character(MACH)는 대규모 언어 모델, 비전 모델 및 3D 생성 기술을 결합합니다.

이 프레임워크는 대규모 언어 모델(LLM)을 활용해 얼굴형, 눈 모양, 입 모양, 헤어스타일과 색상, 안경 타입 등 다양한 얼굴 속성을 추출합니다. 이후 이러한 의미적 속성은 대응하는 시각적 단서로 매핑되어 Stable Diffusion과 ControlNet을 함께 사용해 참조 인물 이미지를 생성하도록 안내합니다. 일련의 2D 얼굴 파싱 및 3D 생성 모듈을 통해 메시 및 텍스처가 생성되어 대상 얼굴에 적용되며, 매칭되는 액세서리와 함께 어셈블됩니다. 파라메트릭 표현 덕분에 생성된 3D 아바타의 애니메이션 제작이 용이해집니다.