GPT-6 Astra vezérli a robotot a konyha rendbetételében, Stanford és Caltech kutatása

A Stanford és a Caltech kutatói megalkották a HomeBody rendszert, amely lehetővé teszi egy Unitree G1 robot számára, hogy önállóan navigáljon egy ismeretlen konyhában, rendet rakjon és tárgyakat vegyen elő fiókokból. Ez egy újabb teszt, amely azt mutatja, hogy a GPT-6 Astra jól működik robotokkal. (The Decoder)

A HomeBody elhagyja a nyelvi modell és a robot közötti tipikus betanított vezérlőréteget. Ehelyett egy cserélhető látás-nyelvi modell (VLM), itt a GPT Astra, közvetlenül hív be egy bővíthető készségkönyvtárat fogáshoz, navigáláshoz vagy fiókok nyitásához. A robot először felfedezi a helyiséget, digitális ikertestet épít az Nvidia Isaac Sim rendszerében, és rögzíti a tárgyakat és azok helyét a térbeli memóriában. Ez lehetővé teszi számára, hogy akkor is megtalálja a tárgyakat, ha azok már kikerültek a látómezejéből.

Az olyan feladatokhoz, mint a „konyha rendbetétele”, a nyelvi modell minden lépést megtervez, és önhibázás esetén önkorrekciót végez. A korlátok közé tartozik az Astra késleltetése, az ujj-szervók túlmelegedése és a magas számítási költségek. A kutatók a kódot GitHubon tették közzé.

Korábbi teljesítménytesztek az Astra jelentősen javult térbeli érvelését mutatták, míg egy másik tanulmány biztonsági problémákra hívta fel a figyelmet, amikor az Astra robotokat irányít. Az OpenAI már bejelentette terveit, hogy visszatérjen a robotikához, beleértve a személyes használatot is.