Assistant scénario▸ 
Apps AI 
Actualités AI Meta dévoile AssetGen 2.0 : nouveau modèle de fondation 3D
小编 ·
Meta dévoile AssetGen 2.0 : nouveau modèle de fondation 3D
Qu'est-ce qu'AssetGen 2.0 ?
AssetGen 2.0, lancé par Meta, est un nouveau 3D modèle outil de génération. Il permet de créer rapidement des modèles 3D et des textures à la fois détaillés et réalistes à partir de prompts textuels ou d'images. AssetGen 2.0 utilise une technologie de diffusion 3D en une seule étape, ce qui simplifie le processus de génération et assure une meilleure cohérence entre la forme et la texture des modèles. Meta souhaite, grâce à cet outil, rendre la création de contenu 3D aussi simple que celle de contenu 2D, afin de faciliter la construction de mondes virtuels. De plus, Meta travaille sur une nouvelle fonctionnalité qui permettra, à terme, de générer une scène 3D entière en une seule fois, rendant la création de contenu 3D encore plus accessible.
Fonctionnalités d'AssetGen 2.0
AssetGen 2.0 est un modèle génératif conçu spécifiquement pour transformer des prompts textuels et des prompts d'image en ressources 3D de haute qualité. Il est composé de deux sous-modèles développés en interne par Meta : l'un destiné à générer des meshes 3D et l'autre à générer des textures.
Architecture technique
Modèle de diffusion 3D en une seule étape : contrairement à AssetGen 1.0, AssetGen 2.0 adopte un modèle de diffusion 3D en une seule étape qui génère directement des meshes 3D à partir de prompts textuels, plutôt que de générer d'abord des vues 2D puis de les traiter. Cette architecture lui permet de produire des assets 3D dotés d'une cohérence géométrique et de détails fins.
Amélioration de la génération de textures : AssetGen 2.0 intègre un modèle TextureGen amélioré pour générer des textures de haute qualité. Le nouveau modèle apporte des améliorations en termes de cohérence entre les vues, d'inpainting de texture et de résolution des textures.
Cas d'utilisation
Création de mondes 3D : Meta utilise actuellement AssetGen 2.0 en interne pour créer des mondes virtuels 3D, et prévoit de le déployer aux créateurs Horizon et à l'éditeur Meta Horizon Desktop d'ici la fin de l'année.
Génération de scènes 3D complètes : Meta prévoit également de lancer, dans les prochains mois, une fonctionnalité de génération de scènes 3D complètes basée sur AssetGen 2.0, permettant aux créateurs de générer rapidement des environnements virtuels complexes à partir de simples prompts textuels ou d'images.
Quelles sont les améliorations d'AssetGen 2.0 par rapport à AssetGen 1.0 ?
En s'appuyant sur AssetGen 1.0, AssetGen 2.0 représente une avancée significative dans la recherche en IA générative 3D. Il adopte un modèle de diffusion 3D en une seule étape (single-stage 3D diffusion model), améliorant considérablement le niveau de détail et le réalisme des meshes 3D. Le modèle TextureGen associé garantit que les assets présentent non seulement un rendu visuel remarquable, mais aussi des textures de haute qualité, capables de répondre aux exigences d'un environnement de production. Le modèle maintient une cohérence géométrique tout en offrant des détails extrêmement fins. Contrairement à AssetGen 1.0, il utilise un mécanisme de diffusion 3D pour la modélisation géométrique et est entraîné sur un vaste corpus d'assets 3D. Pour la génération de textures, il introduit de nouvelles techniques telles que le renforcement de la cohérence entre les points de vue, l'inpainting de textures et la génération de textures à plus haute résolution.
De plus, les assets 3D générés par AssetGen 2.0 présentent des améliorations nettement plus marquées en termes de détails et de fidélité par rapport à AssetGen 1.0, permettant de générer des assets aux détails géométriques fins.
Détails :https://developers.meta.com/horizon/blog/AssetGen2
