Meta stellt AssetGen 2.0 vor: neues 3D-Basismodell 95

小编 ·

Meta stellt AssetGen 2.0 vor: neues 3D-Basismodell

AssetGen 2.0 von Meta ist ein neues 3D-Modellgenerierungs-Tool, das aus Text- oder Bild-Prompts schnell detailreiche, realistische 3D-Modelle und Texturen erzeugt. Auf Basis einer einstufigen 3D-Diffusionstechnologie vereinfacht es den Generierungsprozess und verbessert die Konsistenz von Form und Textur. Meta möchte die Erstellung von 3D-Inhalten so einfach machen wie die von 2D-Inhalten, damit jeder virtuelle Welten bauen kann. Darüber hinaus arbeitet Meta an einer neuen Funktion, die künftig komplette 3D-Szenen in einem Schritt generieren soll.

Meta stellt AssetGen 2.0 vor: neues 3D-Basismodell

Was ist AssetGen 2.0?

AssetGen 2.0, von Meta vorgestellt, ist ein neues 3D-Modell-Generierungs-Tool. Es kann mithilfe von Text- oder Bildvorgaben schnell detaillierte und realistische 3D-Modelle sowie Texturen erstellen. AssetGen 2.0 verwendet eine einstufige 3D-Diffusionstechnologie, die den Generierungsprozess vereinfacht und für eine bessere Harmonie zwischen Form und Textur der Modelle sorgt. Meta möchte mit diesem Tool die Erstellung von 3D-Inhalten so einfach machen wie die von 2D-Inhalten, um den Aufbau virtueller Welten zu erleichtern. Darüber hinaus arbeitet Meta an einer neuen Funktion, mit der in Zukunft ganze 3D-Szenen auf einmal generiert werden können, um die 3D-Inhaltserstellung einer breiteren Masse zugänglich zu machen.

Meta推出新一代3D基础模型:AssetGen 2.0.webp

Funktionen von AssetGen 2.0

AssetGen 2.0 ist ein generatives Modell, das speziell dafür entwickelt wurde, Text- und Bildvorgaben in hochwertige 3D-Assets umzuwandeln. Es besteht aus zwei intern von Meta entwickelten Teilmodellen: eines zur Generierung von 3D-Meshes und ein weiteres zur Erzeugung von Texturen.

Technische Architektur

  • Einstufiges 3D-Diffusionsmodell: Im Gegensatz zu AssetGen 1.0 verwendet AssetGen 2.0 ein einstufiges 3D-Diffusionsmodell, um 3D-Meshes direkt aus Textvorgaben zu erzeugen, anstatt zunächst 2D-Ansichten zu generieren und diese weiterzuverarbeiten. Diese Architektur ermöglicht es, 3D-Assets mit geometrischer Konsistenz und feinen Details zu erzeugen.

  • Verbesserungen bei der Texturgenerierung: AssetGen 2.0 enthält ein aktualisiertes TextureGen-Modell zur Erzeugung hochwertiger Texturen. Das neue Modell wurde in Bezug auf Ansichtskonsistenz, Texturreparatur und Texturauflösung verbessert.

Anwendungsszenarien

  • Erstellung von 3D-Welten: Meta verwendet AssetGen 2.0 derzeit intern, um 3D-Virtualwelten zu erstellen, und plant, das Tool später in diesem Jahr für Horizon-Ersteller und den Meta Horizon Desktop-Editor verfügbar zu machen.

  • Generierung kompletter 3D-Szenen: Meta plant zudem, in den kommenden Monaten eine auf AssetGen 2.0 basierende Funktion zur Generierung kompletter 3D-Szenen einzuführen, die es Erstellern ermöglicht, mithilfe einfacher Text- oder Bildvorgaben schnell komplexe virtuelle Umgebungen zu erzeugen.

Welche Verbesserungen bietet AssetGen 2.0 gegenüber AssetGen 1.0?

Aufbauend auf AssetGen 1.0 stellt AssetGen 2.0 einen bedeutenden Durchbruch in der generativen 3D-ai-Forschung dar. Es verwendet ein einstufiges 3D-Diffusionsmodell (single-stage 3D diffusion model), das die Detailgenauigkeit und den Realitätsgrad der 3D-Meshes deutlich verbessert. Das zugehörige TextureGen-Modell stellt sicher, dass die Assets nicht nur visuell ansprechend sind, sondern auch hochwertige Texturen aufweisen, die den Anforderungen von Produktionsumgebungen gerecht werden. Das Modell gewährleistet geometrische Konsistenz und verfügt gleichzeitig über äußerst feine Details. Im Gegensatz zu AssetGen 1.0 nutzt es bei der geometrischen Modellierung einen 3D-Diffusionsmechanismus und wird auf einem umfangreichen Korpus von 3D-Assets trainiert. Bei der Texturgenerierung werden neue Techniken wie verbesserte Ansichtskonsistenz, Texturreparatur und die Erzeugung höher auflösender Texturen eingeführt.

Darüber hinaus weisen die mit AssetGen 2.0 erzeugten 3D-Assets im Vergleich zu AssetGen 1.0 eine deutlichere Verbesserung hinsichtlich Details und Wiedergabetreue auf und können Assets mit feinen geometrischen Details erzeugen.

Details:https://developers.meta.com/horizon/blog/AssetGen2