TRELLIS.2: model image-ke-3D sumber terbuka Microsoft menghasilkan aset PBR dalam hitungan detik
Microsoft Research merilis TRELLIS.2, model image-ke-3D dengan 4 miliar parameter yang menghasilkan aset 3D bertekstur dengan material PBR lengkap. Model ini berlisensi MIT, bersifat sumber terbuka, dan cepat: 3 detik pada resolusi 512 kubik, 17 detik pada 1024 kubik, dan 60 detik pada 1536 kubik menggunakan NVIDIA H100.
TRELLIS dari Microsoft mengubah gambar 2D menjadi model 3D bertekstur lengkap
Apa yang dihasilkannya
Tidak seperti model image-ke-3D sebelumnya yang menghasilkan mesh dasar dengan warna verteks yang sudah di-bake, TRELLIS.2 menghasilkan peta material PBR lengkap: albedo, metallic, roughness, normal, dan opacity. Ini adalah peta yang sama seperti yang dibutuhkan oleh game engine dan pipeline rendering, sehingga aset yang dihasilkan dapat langsung dimasukkan ke Blender, Unreal Engine, atau Unity tanpa perlu menyiapkan material secara manual.
Model ini menggunakan transformer flow-matching dan representasi O-Voxel baru. O-Voxel adalah struktur voxel sparse "tanpa medan" dengan kompresi spasial 16x yang mampu menangani topologi apa pun. Ini mencakup permukaan terbuka, geometri non-manifold, dan struktur internal yang tidak dapat direpresentasikan oleh metode iso-surface sebelumnya.
Kecepatan dan resolusi
Kecepatan pembuatan menyesuaikan dengan resolusi:
| Resolusi | Waktu (H100) |
|---|---|
| 512³ | ~3 detik |
| 1024³ | ~17 detik |
| 1536³ | ~60 detik |
Konversi mesh-ke-O-Voxel membutuhkan waktu kurang dari 10 detik pada CPU. Konversi O-Voxel kembali menjadi mesh membutuhkan waktu kurang dari 100 milidetik dengan akselerasi CUDA.
Perbandingannya dengan TRELLIS 1
TRELLIS.2 menggandakan jumlah parameter dari 2 miliar menjadi 4 miliar. TRELLIS versi awal dapat menghasilkan geometri yang cukup baik, tetapi belum memiliki material PBR yang memadai. Versi 2 menambahkan pipeline material lengkap, menangani topologi yang lebih kompleks, dan berjalan pada resolusi yang lebih tinggi.
Tutorial: membuat model 3D dari gambar 2D dengan TRELLIS
Cara menggunakannya
Ada beberapa cara untuk menjalankan TRELLIS.2:
Demo Hugging Face. Demo web gratis memungkinkan Anda mengunggah gambar dan mendapatkan model 3D tanpa perlu melakukan penyiapan lokal.
Deployment lokal. Repositori GitHub menyediakan image Docker untuk instalasi lokal. Anda memerlukan GPU NVIDIA dengan VRAM minimal 24 GB agar dapat menjalankannya dengan nyaman.
Integrasi ComfyUI. Node ComfyUI buatan komunitas memungkinkan Anda mengintegrasikan TRELLIS.2 ke dalam alur kerja pembuatan yang sudah ada bersama alat AI lainnya.
Mengapa ini penting
Teknologi image-ke-3D sumber terbuka terus berkembang, tetapi sebagian besar model menghasilkan geometri yang cukup baik dengan tekstur buruk, atau hasil yang tampak bagus tetapi bermasalah saat topologinya diperiksa. TRELLIS.2 mengatasi keduanya dengan menghasilkan geometri bersih beserta material PBR yang tepat pada resolusi yang sesuai untuk produksi. Lisensi MIT memungkinkan Anda menggunakannya secara komersial tanpa pembatasan.
Bagi pengembang game dan seniman 3D, ini merupakan alat pembuatan prototipe yang bermanfaat. Masukkan gambar seni konsep, dapatkan model 3D bertekstur dalam hitungan detik, lalu sempurnakan hasilnya.