Beeld-naar-3D met TRELLIS: 3D-assets uit een prompt
TRELLIS maakt van een beeld of prompt een GLB-3D-asset, MIT-gelicentieerd. Wat het beheerst, en welk nawerk nog nodig is.
Vertaling automatisch gegenereerd met AI. De Duitse versie is het redactioneel gecontroleerde origineel.
TRELLIS, de open 3D-generator van Microsoft Research, maakt van een enkel beeld of een tekstprompt in minder dan twee minuten op een consumenten-GPU een bruikbaar 3D-asset, en het komt onder de MIT-licentie. Voor concepting, web- en AR-previews en e-commerce mockups is dat een echte kortere weg. Voor game- of CAD-pipelines ligt de eerlijke inschatting anders: behandel de output als een snel startblok dat nog nawerk nodig heeft, niet als een afgewerkt asset.
Deze bijdrage behandelt wat TRELLIS is, hoe het werkt, waar het past in een echte asset-pipeline en op welke punten het ophoudt een antwoord met één klik te zijn.
01. Wat TRELLIS is
TRELLIS is een generatief 3D-model dat een beeld, meerdere beelden of een tekstprompt aanneemt en een 3D-asset genereert.
🔸 Gestructureerde latents (SLAT). Het kernidee is een uniforme latent die een dunbezet 3D-voxelrooster voor de structuur verbindt met dichte visuele kenmerken voor het uiterlijk. Vorm loskoppelen van uiterlijk is wat dezelfde latent tot verschillende outputs laat worden.
🔸 Drie outputs uit een latent. Radiance fields, 3D-gaussians of een als GLB geëxporteerde mesh. GLB is het praktische doel, omdat het materialen draagt in web- en AR-viewers.
🔸 Open en MIT-gelicentieerd. Het werkpaard voor beelden, TRELLIS-image-large, heeft 1,2 miljard parameters. Het model en het merendeel van de code zijn MIT, wat telt voor commercieel gebruik. Een nieuwere 4B-reeks voegt volledig fysiek gebaseerde materialen toe, de moeite waard om te volgen terwijl ze rijpt.
🔸 Getraind op grote schaal. Rond 500.000 gecureerde objecten, met het paper als CVPR 2025 Spotlight.
Dat staat naast het parametrische, stuurbare uiteinde van 3D-werk, dat we behandelen in Grasshopper voor computerondersteund ontwerp. Generatieve 3D en parametrische 3D lossen verschillende problemen op.
02. Hoe het werkt
De pipeline is kort te beschrijven en nuttig om te begrijpen voordat u er een GPU aan wijdt.
- Input. Een enkel beeld, meerdere aanzichten of een tekstprompt.
- Gestructureerde latent. Een tweetraps rectified-flow-transformer genereert eerst de dunbezette structuur en vult vervolgens de SLAT-kenmerken.
- Decoderen. De latent decodeert naar uw gekozen formaat: mesh, gaussians of radiance field.
In de praktijk plant u met ongeveer 16 GB VRAM als ondergrens, met 24 GB comfortabel. De generatie loopt in minder dan twee minuten op een RTX 4090. Community-builds drukken de geheugenbehoefte verder omlaag, wat TRELLIS realistisch zelf-hostbaar maakt in plaats van gehuurd. Voor teams die al lokale tegenover gehoste inferentie afwegen, geldt dezelfde afweging die we beschreven in On-premise tegenover cloud-LLM, ook voor generatieve media.
03. Waar het past in een asset-pipeline
De sterkste match is het begin van de pipeline, waar tempo boven finish gaat.
🔸 Een productfoto of prompt naar een GLB. Plaats het in een three.js-viewer of een model-viewer op het web, converteer naar USDZ voor AR of zet het in een visualisatiescène. Snel concepting en previews zijn waar TRELLIS uitblinkt.
🔸 Lokaal bewerken. TRELLIS kan een regio van het model opnieuw genereren of verfijnen, wat zeldzaam is onder generatoren die van één beeld uitgaan.
🔸 Eerlijk over topologie. De output is generatieve geometrie, geen kunstenaarschone mesh. Verwacht ongelijkmatige driehoeken, geen schone edge-flow en automatisch gegenereerde UV's. Voor games of film gaat u retopologiseren, opnieuw UV-mappen en texturen opnieuw bakken. De nieuwere materiaalbewuste reeks verkleint deze kloof, zonder haar te sluiten.
De waardetest voor een gegeven asset is dus eenvoudig: moet het volgende week correct uitzien in een viewer, of moet het een riggbaar, geoptimaliseerd game-asset zijn? TRELLIS is uitstekend in het eerste en een startpunt voor het tweede.
04. TRELLIS tegenover de alternatieven
Het open en gehoste 3D-veld bewoog snel. Een korte oriëntatie:
| Model | Type | Licentie | Opmerking |
|---|---|---|---|
| TRELLIS | Beeld en tekst naar 3D | MIT | Werkelijk vrijgevig, output in meerdere formaten, lokaal bewerken |
| Hunyuan3D | Beeld naar 3D, textuur in hoge resolutie | Community, met voorwaarden | Sterke open textuurkwaliteit, licentie niet volledig vrijgevig |
| Stable Fast 3D | Enkel beeld naar 3D | Gratis onder een omzetgrens | Vrijwel direct, lagere detailgetrouwheid |
| Tripo | Beeld en tekst naar 3D | Commerciële SaaS | Schonere, meer game-klare meshes |
| Rodin | Beeld en tekst naar 3D | Commerciële SaaS | Gepolijste, productienabije output |
Waar TRELLIS staat: de sterkste werkelijk MIT-gelicentieerde optie met output in meerdere formaten en lokaal bewerken. Gehoste tools zoals Tripo en Rodin verslaan het op meteen schone topologie, en Hunyuan wint vaak op textuur, maar met een restrictievere licentie. Als uw vereiste is het model en de juridische voorwaarden te bezitten, is TRELLIS het voor de hand liggende startpunt.
05. De eerlijke grenzen, en hoe wij het gebruiken
Een paar kanttekeningen die we op tafel leggen voordat iemand TRELLIS in productie inzet:
🔸 Topologie en UV's zijn niet productieklaar voor games of CAD. Plan budget in voor retopo.
🔸 CAD valt buiten het bereik. Generatieve meshes zijn geen parametrische solids, dus geen engineering-geometrie.
🔸 Het inputrisico ligt bij u. Het model is MIT, maar de juridische blootstelling van uw inputbeeld of prompt is de uwe. Voer geen productfoto's in die u niet kunt licentiëren.
Wij behandelen TRELLIS als een concepting- en previz-engine: een manier om in een middag een geloofwaardig 3D-asset voor een klant neer te zetten en dan te beslissen wat een handgemaakte pipeline verdient. Dat is hetzelfde instinct achter waar de huidige golf van AI-videomodellen nuttig is, en dezelfde selectiediscipline die we toepassen bij het kiezen van een beeldmodel. Het gereedschap is niet de levering. Het oordeel over waar het past, is dat wel.
