Bemutatta első nyílt súlyú robotikai modellezet a Runway AI

A Runway technológiai igazgatója, Kamil Sindi hangsúlyozta, hogy a robotikai adatok gyűjtése drága és nehézkes, ezért a Praxis-1 főként harmadik féltől származó videókból tanul. Ez a megközelítés lehetővé teszi, hogy a modell már most értse a tárgyak viselkedését és a feladatok zajlását, miközben a teljesítménye a videók skálázásával javul. (The Robot Report)

Videós adatok a robotképzésben

Míg a valós robotikai adatokból kevés áll rendelkezésre a generalista AI-modellek képzéséhez, addig a videóadatokból bőséges a kínálat. A Runway AI szerint naponta több mindennapi életet megörökítő videót töltenek fel az emberek, mint amennyit bármely robotikai labor teleoperált demonstrációkkal képes lenne rögzíteni. A Runway megállapította, hogy a világmodelljükön belüli szimulált robotpolitikák 0,95-ös korrelációval jósolják meg a valós eredményeket.

A 2018-ban alapított Runway AI generatív mesterséges intelligencia kutatásra és technológiákra szakosodott. A cég több AI-modellt kínál, köztük az Aleph 2.0-t videószerkesztéshez, az Act-Two-t mozgásrögzítéshez, és a Gen-4.5-öt szövegből vagy képekből videó generálásához. A robotika területén a Runway kínálja a GWM-1 általános világmodellt is.

Áttekintés és tesztelés

A Runway szerint a Praxis-1 ugyanezt a megközelítést hozza a robotikába, egy általános, több testalkaton és környezeten is működő politikai modellt kínálva a fejlesztőknek és kutatóknak. A Praxis-1-et már tesztelik korai partnerekkel, köztük a Noble Machines, a Standard Bots és az Ultra cégekkel, akik saját hardvereiken futtatják a modellt. A visszajelzések alapján egyetlen modell képes könnyű finomhangolással alkalmazkodni nagyon eltérő testalkatokhoz, a kétkarú robotoktól a humanoidokig.

A Runway tervei szerint a Praxis-1-et nyílt súlyokkal teszik közzé a következő hónapokban. „Hisszük, hogy az amerikai vezetés a fizikai AI-ban kritikus a gyártási előnyünk visszaszerzéséhez, és ehhez nyílt amerikai modellekre van szükség” – nyilatkozta Sindi. A nyílt súlyok rugalmasságot és kontrollt biztosítanak a hardverfejlesztőknek, ami ma nincs meg.