TRELLIS 3D : génère des modèles 3D à partir d'une image ou d'une description textuelle 83

Qu'est-ce que TRELLIS 3D

TRELLIS 3D est un modèle de génération 3D open source développé conjointement par Microsoft Research Asia, l'Université Tsinghua et l'Université de science et technologie de Chine. Grâce à la technologie SLAT, il peut générer directement des modèles 3D de haute qualité à partir d'une image 2D ou d'une description textuelle.

Le modèle TRELLIS 3D compte 4 milliards de paramètres et repose sur une toute nouvelle représentation O-Voxel, capable de compresser l'espace par 16 et de produire un modèle texturé en résolution 512³ en seulement 3 secondes.

Caractéristiques principales de TRELLIS 3D

• Génération ultra-rapide : sur un H100, 512³ en 3 secondes, 1024³ en environ 17 secondes, et 1536³ en à peine 1 minute

• Résolution élevée : choix entre 512³ et 1536³, avec un taux de compression très impressionnant

• Toutes les formes acceptées : contrairement aux méthodes classiques limitées aux modèles fermés, il gère aussi bien les surfaces ouvertes (vêtements, feuillages) que les objets à structure interne

• Système de matériaux complet : prise en charge du pipeline PBR intégral (couleur de base, rugosité, métallicité, transparence)

• Formats pris en charge : exportation possible en GLB, OBJ, STL, GLTF, USDZ, PLY, 3D Gaussian, et autres formats courants

• Deux modes d'entrée : image-vers-3D et texte-vers-3D

• Édition locale possible : après génération, possibilité d'ajouter, supprimer ou modifier des zones spécifiques

• Pipeline simplifié : conversion mesh texturé vers O-Voxel en moins de 10 secondes côté CPU, conversion inverse en 100 ms avec CUDA

Cas d'utilisation de TRELLIS 3D

• Développement de jeux : création rapide de décors, d'objets et de personnages, fini le建模 from scratch pour les graphistes

• Cinéma et animation : idéal pour créer des assets d'effets spéciaux et des modèles de prévisualisation

• VR/AR : génération d'objets virtuels réalistes pour une meilleure immersion

• Design industriel : prototypage rapide pour valider les concepts produit

• E-commerce : création de présentations produits 3D interactives

• Impression 3D : génération directe de fichiers modèles prêts à imprimer

• Éducation et recherche : utilisation comme outil de génération de données 3D

Analyse des avantages et inconvénients de TRELLIS 3D

Points forts

• Qualité réellement élevée : 4 milliards de paramètres associés à un VAE 3D稀疏, excellents en termes de détails et de fidélité

• Vitesse inégalée : modèle généré en 3 secondes, bien plus rapide que le modélisation traditionnelle

• Peu de contraintes topologiques : gestion de géométries complexes, y compris les surfaces ouvertes et les structures internes

• Matériaux complets : pipeline PBR entièrement支持, y compris la transparence

• Totalement open source : licence MIT, utilisable à des fins commerciales

• Configuration matérielle accessible : fonctionne avec 16 Go de VRAM, compatible RTX 3090/4090

Points faibles

• Gourmand en matériel : pour une génération ultra-rapide, une carte haut de gamme type H100 reste nécessaire ; les cartes classiques sont nettement plus lentes

• Limites sur les détails fins : les traits du visage, les textures très fines (comme les cordes) ne sont pas encore parfaits

• Coût d'entraînement élevé : le pré-entraînement à grande échelle nécessite d'énormes volumes de données 3D, et un'entraînement从头 reste très coûteux

• Modèle低多边形 à la loupe : en zoomant, les contours restent légèrement粗糙 — il s'agit au fond d'un modèle低多边形

Tutoriel d'utilisation de TRELLIS 3D

1. Accéder directement au site officiel de TRELLIS 3D

2. Télécharger une image JPG/PNG (recommandé : 1920×1080 ou plus)

3. Cliquer sur « Générer » et attendre quelques secondes pour voir le modèle 3D

4. Une fois le résultat satisfaisant, télécharger directement en GLB ou un autre format

Questions fréquentes

• La génération de TRELLIS 3D est trop lente ?

  Vérifiez que l'accélération CUDA est activée, une RTX 4090 ou supérieure est recommandée ; réduire la résolution accélère le traitement.

• Mémoire VRAM saturée ?

  Définir la variable d'environnement PYTORCH_CUDA_ALLOC_CONF=expandable_segments:True permet d'économiser de la VRAM.

• La transparence ne s'affiche pas ?

  Le GLB est opaque par défaut, il faut manuellement relier l'Alpha de la texture à la transparence dans le logiciel 3D.

• Les détails ne sont pas assez nets ?

  Essayez les résolutions 1024³ ou 1536³ ; les structures très complexes restent techniquement limitées.

• Quels formats d'image sont pris en charge ?

  JPG, PNG, WEBP sont acceptés ; les images avec canal de transparence sont utilisées comme masque.

• Utilisation commerciale autorisée ?

  Oui, sous licence MIT, mais attention aux dépendances (comme nvdiffrast) qui peuvent avoir leur propre licence.

• Envie de faire du fine-tuning ?

  TRELLIS.2 fournit le code d'entraînement complet, il suffit d'utiliser train.py pour le fine-tuning ou l'entraînement从头.

Actualités associées :

Génération de modèles 3D par IA