TRELLIS 3D: genera modelos 3D a partir de una imagen o descripción de texto 79

Qué es TRELLIS 3D

TRELLIS 3D es un modelo de generación 3D de código abierto creado conjuntamente por Microsoft Research Asia, la Universidad Tsinghua y la Universidad de Ciencia y Tecnología de China. Mediante la tecnología SLAT, puede generar modelos 3D de alta calidad directamente a partir de una imagen 2D o de una descripción textual.

El modelo TRELLIS 3D cuenta con 4.000 millones de parámetros y se basa en una nueva representación O-Voxel, capaz de comprimir el espacio 16 veces y generar modelos texturizados con resolución 512³ en solo 3 segundos.

Características principales de TRELLIS 3D

• Generación ultrarrápida: en una H100, generar 512³ tarda solo 3 segundos, 1024³ unos 17 segundos y 1536³ aproximadamente 1 minuto

• Alta resolución: admite desde 512³ hasta 1536³, con una relación de compresión impresionante

• Acepta cualquier tipo de forma: a diferencia de los métodos tradicionales limitados a modelos cerrados, puede manejar superficies abiertas como ropa u hojas, e incluso objetos con estructuras internas

• Sistema de materiales completo: compatible con el flujo PBR completo, incluyendo color base, rugosidad, metalicidad y transparencia

• Soporte de formatos amplio: exporta a formatos comunes como GLB, OBJ, STL, GLTF, USDZ, PLY y 3D Gaussian

• Dos modos de entrada: tanto imagen-a-3D como texto-a-3D

• Edición local: tras la generación, se pueden añadir, eliminar o modificar regiones específicas

• Flujo de procesamiento sencillo: la conversión de malla texturizada a O-Voxel tarda menos de 10 segundos en CPU, y la conversión inversa se realiza en 100 milisegundos con CUDA

Casos de uso de TRELLIS 3D

• Desarrollo de videojuegos: crea rápidamente objetos de escena y personajes, sin que los artistas tengan que modelar desde cero

• Cine y animación: facilita la creación de assets de efectos especiales y modelos de previsualización

• VR/AR: genera objetos virtuales realistas para mejorar la inmersión

• Diseño industrial: genera rápidamente prototipos de productos para validar diseños

• E-commerce: crea presentaciones 3D interactivas de productos

• Impresión 3D: genera directamente archivos de modelos listos para imprimir

• Educación e investigación: úsalo como herramienta de generación de datos 3D

Análisis de ventajas y desventajas de TRELLIS 3D

Puntos fuertes

• Calidad realmente alta: con 4.000 millones de parámetros y un VAE 3D disperso, el nivel de detalle y la fidelidad son excelentes

• Velocidad inigualable: genera modelos en 3 segundos, mucho más rápido que el modelado tradicional

• Pocas restricciones topológicas: maneja estructuras geométricas complejas, incluyendo superficies abiertas y estructuras internas

• Materiales muy completos: flujo de trabajo PBR íntegro, con soporte para efectos de transparencia

• Totalmente de código abierto: bajo licencia MIT, también válido para uso comercial

• Requisitos de hardware no excesivos: funciona con 16 GB de VRAM, compatible con RTX 3090/4090

Aspectos a mejorar

• Consume hardware: para generar a máxima velocidad se necesitan tarjetas de gama alta como la H100; con tarjetas convencionales será bastante más lento

• Limitaciones en detalles complejos: rasgos faciales, texturas finas (como cuerdas) y otros detalles aún no se generan de forma perfecta

• Coste de entrenamiento elevado: el preentrenamiento a gran escala requiere enormes volúmenes de datos 3D, y entrenarlo desde cero es muy caro

• Al ampliar se ve como un modelo de baja resolución: los detalles de los bordes se ven algo rugosos al hacer zoom; en esencia sigue siendo un modelo de baja poligonización

Tutorial de uso de TRELLIS 3D

1. Ve directamente a la web oficial de TRELLIS 3D

2. Sube una imagen JPG/PNG (se recomienda 1920×1080 o superior)

3. Pulsa generar y en unos segundos verás el modelo 3D

4. Si la previsualización te convence, descarga directamente en formato GLB u otro

Preguntas frecuentes

• ¿TRELLIS 3D genera demasiado lento?

  Asegúrate de que la aceleración CUDA esté activada; se recomienda una RTX 4090 o superior. Reducir la resolución también acelera el proceso.

• ¿Se queda sin memoria VRAM?

  Configura la variable de entorno PYTORCH_CUDA_ALLOC_CONF=expandable_segments:True para ahorrar VRAM.

• ¿No aparece el efecto de transparencia?

  GLB por defecto no muestra la transparencia; hay que conectar manualmente el Alpha de la textura a la opacidad en el software 3D.

• ¿Los detalles no son lo suficientemente nítidos?

  Prueba con resoluciones de 1024³ o 1536³; para estructuras especialmente complejas la tecnología actual aún tiene un tope.

• ¿Qué formatos de imagen son compatibles?

  JPG, PNG y WEBP funcionan; las que tengan canal alfa se interpretarán como máscaras.

• ¿Se puede usar con fines comerciales?

  Sí, es de código abierto bajo licencia MIT, pero ten en cuenta que algunas dependencias (como nvdiffrast) pueden tener sus propias licencias independientes.

• ¿Quieres ajustarlo tú mismo?

  TRELLIS.2 ofrece el código de entrenamiento completo; con train.py puedes ajustarlo o entrenarlo desde cero.

Noticias relacionadas:

Generación de modelos 3D con IA