NVIDIA: n julkaiseman materiaalin mukaan Cosmos 3 on maailman ensimmäinen täysin avoin omnimodaalinen fyysinen tekoäly perustamalli. Se on rakennettu NVIDIA:n omalle hybridi Transformer-arkkitehtuurille, ja malli yhdistää sekä päättely- että generointisivut, mahdollistaen visuaalisen päättelyn, maailman generoinnin ja toiminnan ennustamisen yhdellä mallilla. Se voi tarkasti toistaa todellisia fyysisiä sääntöjä, kuten painovoimaa, törmäystä ja kitkaa. Toisin kuin yleiset multimodaalimallit, jotka on ensisijaisesti suunniteltu viihteen sisältötuotantoon, Cosmos 3 tukee natiiviesti viiden modaalin syöttämistä ja generointia: teksti, kuvat, video, ympäristön ääni, sekä ihmisten ja robottien liike. Suurilla fyysisesti merkittyjen datasetien avulla ennakkokoulutettu malli voi itsenäisesti luoda realistista tilanteen tietoa ja liiketähtiä, jotka noudattavat todellisia fyysisiä lakeja.
Viralliset tiedot osoittavat, että Cosmos 3:lle on suunniteltu useita mallitasoja. Super-versio, jossa on suuremmat parametrit, on suunniteltu autoalan ja humanoidi-robotiikkayhtiöiden suurta tietosynteesiä ja edistyneiden algoritmien kehittämistä varten. Base-versio kohdistuu pienten ja keskikokoisten tutkimus- ja kehitystiimien tarpeisiin eri toimialoilla, kun taas Tiny-versio on optimoitu paikalliseen käyttöön reunalla ja upotetulla laitteistolla. NVIDIA on avannut täysin mallin painot, lähdekoodin ja tukevat arviointidatat, ja siihen liittyvät resurssit ovat saatavilla avoimilla alustoilla, kuten Hugging Face ja GitHub. Globaali kehittäjäyhteisö voi päästä käsiksi resursseihin ilmaiseksi ja hienosäätää niitä tarpeen mukaan. Käyttöönoton tehokkuuden osalta NVIDIA sanoo, että malli voi puristaa perinteiset simulaatio- ja virheenkorjausjaksot robotiikan, autonomisen ajamisen ja teollisten digitaalisten kaksosprojektien osalta useista kuukausista vain muutamaan päivään, auttaen vähentämään tietokeräyksen ja testauksen kustannuksia fyysisen tekoälyn kehittämisessä.
Tuoteilmoituksen ohella NVIDIA esitteli myös ekosysteemistrategiaansa muodostamalla NVIDIA Cosmos Coalitionin, globaalin yhteistyöallianssin. Perustajajäsenet sisältävät johtavia tekoälylaboratorioita ja robotiikkayrityksiä, kuten Agile Robots, Black Forest Labs, Runway, LTX ja Skild AI. Allianssin yhteistyökehyksen alla jäsenorganisaatiot voivat jakaa koko Cosmos 3:n teknologiapinon, käyttää NVIDIA:n DGX Cloud -laskentaresursseja tarpeen mukaan sekä vaihtaa algoritmeja, vertailuarvoja ja todellisia teollisuuden testausdataa. Allianssin tavoitteena on kehittää yhdessä yhteisiä normeja avoimille maailmanmalleille ja nopeuttaa seuraavan sukupolven fyysisten tekoälyteknologioiden iterointia ja kaupallistamista.
Julkisesti saatavilla olevat tiedot osoittavat, että useat automerkit ja automaatioalan laitteiden valmistajat ovat jo aloittaneet sisäiset testit Cosmos 3:een perustuvissa projekteissa. Mahdollisia käyttöönottoa koskevia skenaarioita ovat humanoidirobottien kehittäminen, autonominen ajamisen simulaatio, teollinen visuaalinen tarkastus ja realistisen digitaalisen sisällön luominen.