NVIDIA Cosmos 3: een open model voor fysieke AI
NVIDIA Cosmos 3: een open wereldmodel voor fysieke AI dat visie, wereldgeneratie en handeling in één systeem verenigt.
Vertaling automatisch gegenereerd met AI. De Duitse versie is het redactioneel gecontroleerde origineel.
NVIDIA gebruikte zijn Computex 2026-keynote om Cosmos 3 te introduceren, een open world foundation model voor fysieke AI dat visieredenering, wereldgeneratie en handelingsvoorspelling in een systeem verenigt. Het is tot nu toe het duidelijkste signaal dat de volgende grens niet chat is, maar machines die de echte wereld begrijpen en erin handelen.
01. De verschuiving: rekenkracht is data
De echte wereld is praktisch oneindig, en echte data zijn moeilijk te schalen. NVIDIA's inschatting is onomwonden: voor fysieke AI is rekenkracht data. In plaats van meer opnames te verzamelen, genereert Cosmos 3 fysisch accurate trainingsdata op aanvraag, waardoor NVIDIA zegt dat het de trainings- en evaluatiecycli voor fysieke AI verkort van maanden tot dagen. Het werd getraind op 20 biljoen tokens multimodale data, waaronder bijna een miljard beelden en 400 miljoen echte en synthetische video's.
02. Eén model, drie taken
Waar eerdere Cosmos-releases het werk verdeelden over gescheiden modellen (Predict, Transfer, Reason, Policy), brengt Cosmos 3 ze samen in een omnimodel, gebouwd op een mixture-of-transformers-architectuur, waarbij pixels, handeling, geluid en taal door een enkele autoregressieve transformer stromen:
- Als VLM: Het observeert de fysieke wereld, beschrijft scenes en markeert wat belangrijk is.
- Als wereldmodel: Het genereert fysisch accurate synthetische video uit een beeld, tekst of video.
- Als simulator: Het sluit de lus voor training en evaluatie van robot-policies.
Voor fysieke AI is rekenkracht data. Cosmos verandert het zwaarste onderdeel van elk robotica-project, genoeg realistische scenario's genereren om te trainen en te valideren, in een API-aanroep.
03. De coalitie, en waarom we opletten
NVIDIA lanceerde bovendien de Cosmos Coalition, een samenwerking met Agile Robots, Black Forest Labs, Generalist, LTX, Runway en Skild AI, om wereldmodellen van de volgende generatie samen vooruit te brengen. De gewichten zijn open, en een 8B-nanovariant is klein genoeg om lokaal te draaien, vergezeld van een uitgebreid technisch rapport en een ontwikkelaarshandleiding.
Dat is precies waar onze AI-, XR- en 3D-designwerk elkaar raken. Een wereldmodel dat fysisch accurate synthetische omgevingen genereert, is in de kern een data- en simulatie-engine, en het zware onderdeel van elk robotica-, digital twin- of spatial computing-project is zelden het model, maar genoeg realistische scenario's genereren om te trainen en te valideren. Voor klanten die iets bouwen dat de echte wereld moet begrijpen of erin moet handelen, houdt "rekenkracht is data" op een slogan te zijn en wordt het een werkwijze.
Bronnen: NVIDIA Newsroom, NVIDIA Blog, NVIDIA Cosmos overzicht.
