Cosmos 3-Nano-Sim-Auto szinkronizált kamera-LiDAR adatot generál, 16 milliárd paraméterrel
A négy új checkpoint közül a Sim-Auto változat képes a két érzékelő típusú jeladatok párhuzamos, időbeli egybehangolására, ami kulcsfontosságú az autonóm járművek szimulációs teszteléséhez.
Négy új nyílt-súlyú checkpoint került a Cosmos 3 modellcsaládba – Cosmos3-Nano-Transfer-Auto, Cosmos3-Nano-Sim-Auto, Cosmos3-Nano-Sim-Transfer és Cosmos3-Nano-Sim-Bimanual — írja az NVIDIA.
Minden checkpoint a Cosmos 3 Nano post-trained változata, amely 16 milliárd tanítható paraméterrel rendelkezik, és a Mixture-of-Transformers hátteret használja a szöveg- és képgenerálás összekapcsolásához.
Mire képes a modell
A Sim-Auto képes szinkronizált több-kamera videót és LiDAR adatot előállítani akár 11 kamera-nézetben, változatos időjárási, fény- és napszak-körülményekkel, így támogatja az önvezető szimulációkat.
A Sim-Transfer szöveges promptból fotorealisztikus videót generál, míg a Sim-Bimanual robot- vagy kamera-akciókból előrejelzi a videót, lehetővé téve a két-karú robotok interaktív szimulációját.
Licenc és elérhetőség
Az új checkpointek az OpenMDW 1.1 licenc alatt érhetők el, amely kereskedelmi és nem-kereskedelmi felhasználást egyaránt engedélyez; a súlyok és a post-training receptek nyílt forrásként letölthetők.
A modell teljesítményének gyakorlati hatékonyságát, például a policy-learning támogatását még mérni kell, a korlátok és a valós-világos szituációkban való általánosíthatóság továbbra is nyitott kérdés. A checkpointek már elérhetők a Hugging Face platformon, a kiadás 2026. november 5-én történt.