TRELLIS.2: el modelo de código abierto de Microsoft que convierte imágenes en 3D genera recursos PBR en segundos
Microsoft Research lanzó TRELLIS.2, un modelo de conversión de imágenes a 3D con 4.000 millones de parámetros que genera recursos 3D texturizados con materiales PBR completos. Tiene licencia MIT, es de código abierto y rápido: tarda 3 segundos con una resolución de 512³, 17 segundos con 1024³ y 60 segundos con 1536³ en una NVIDIA H100.
TRELLIS de Microsoft convierte imágenes 2D en modelos 3D completamente texturizados
Qué genera
A diferencia de modelos anteriores de conversión de imágenes a 3D, que generaban mallas básicas con colores de vértices prehorneados, TRELLIS.2 produce mapas de materiales PBR completos: albedo, metalicidad, rugosidad, normales y opacidad. Son los mismos mapas que esperan los motores de videojuegos y los flujos de renderizado, lo que permite importar los recursos generados directamente en Blender, Unreal Engine o Unity sin tener que configurar manualmente los materiales.
El modelo utiliza transformers de flow matching y una novedosa representación O-Voxel. O-Voxel es una estructura dispersa de vóxeles «sin campos», con una compresión espacial de 16x, que admite topologías arbitrarias. Esto incluye superficies abiertas, geometría no múltiple y estructuras internas que los métodos anteriores basados en isosuperficies no podían representar.
Velocidad y resolución
La velocidad de generación varía según la resolución:
| Resolución | Tiempo (H100) |
|---|---|
| 512³ | ~3 segundos |
| 1024³ | ~17 segundos |
| 1536³ | ~60 segundos |
La conversión de malla a O-Voxel tarda menos de 10 segundos en CPU. La conversión de O-Voxel de vuelta a malla tarda menos de 100 milisegundos con aceleración CUDA.
Comparación con TRELLIS 1
TRELLIS.2 duplica el número de parámetros, pasando de 2.000 millones a 4.000 millones. El TRELLIS original podía generar geometría decente, pero carecía de materiales PBR adecuados. La versión 2 añade el flujo completo de materiales, admite topologías más complejas y funciona con resoluciones más altas.
Tutorial: cómo crear modelos 3D a partir de imágenes 2D con TRELLIS
Cómo utilizarlo
Hay varias formas de ejecutar TRELLIS.2:
Demo de Hugging Face. Una demo web gratuita permite subir una imagen y obtener un modelo 3D sin necesidad de configurar nada en el equipo local.
Despliegue local. El repositorio de GitHub incluye imágenes de Docker para la instalación local. Necesitarás una GPU NVIDIA con al menos 24 GB de VRAM para usarlo con comodidad.
Integración con ComfyUI. Los nodos de ComfyUI creados por la comunidad permiten incorporar TRELLIS.2 a los flujos de generación existentes junto con otras herramientas de IA.
Por qué es importante
La conversión de imágenes a 3D mediante herramientas de código abierto ha mejorado de forma constante, pero la mayoría de los modelos producen geometría decente con texturas deficientes o resultados visualmente atractivos que se desmoronan al examinar la topología. TRELLIS.2 aborda ambos problemas al generar geometría limpia con materiales PBR adecuados y resoluciones aptas para producción. La licencia MIT permite utilizarlo comercialmente sin restricciones.
Para desarrolladores de videojuegos y artistas 3D, es una herramienta útil de prototipado. Introduce una imagen de arte conceptual, obtén un modelo 3D texturizado en segundos y continúa refinándolo a partir de ahí.