Új Humanoid Robot Adatkészlet Apple Vision Pro-t Használ az Adatgyűjtéshez
A Dél-kaliforniai Egyetem és a Toyota Research Institute kutatói kifejlesztették és közzétették a Humanoid Everyday nevű „nagyméretű és sokszínű humanoid manipulációs adatkészletet”. Az adatkészletet két különböző UniTree humanoid robotról gyűjtötték be, amelyeket Apple Vision Pro headsetet viselő emberi kezelők irányítottak.
- Mit tartalmaz: Az adatkészlet 10,3 ezer trajektóriát tartalmaz, melyek 3 millió adatkeretet ölelnek fel 260 feladaton keresztül, 7 széles tevékenységi kategóriában. A kategóriák a következők: alapvető manipuláció, deformálható manipuláció, eszközhasználat, artikulált manipuláció, nagy pontosságú manipuláció, ember-robot interakció és mozgás-manipuláció.
- Példa feladatok: A végrehajtott feladatok közé tartozik tárgyak felvétele és elhelyezése, otthonok takarítása és rendezése, ruhák hajtogatása és kihajtogatása, tárgyak átadása embereknek, valamint felületek tisztítása és törlése.
- Az adatok multi-modálisak, tartalmaznak RGB nézeteket, LiDAR-t, mélységbecslést, tapintási adatokat a kezekből, IMU adatokat a robotból, ízületi állapotokat és emberi cselekvéseket.
Miért fontos?
Valószínűleg észrevette, hogy ma már sok vállalat, a Teslától és a Boston Dynamics-tól a Unitree-ig, humanoid robotokat épít. De azt is észrevehette, hogy ezek a robotok még nem képesek túl sok gazdaságilag hasznos munkát végezni a mozgáson túl (ami lenyűgöző ahhoz képest, hol tartottunk tíz évvel ezelőtt!). Az ehhez hasonló adatkészletek segíteni fognak. ---
Kapcsolódó hírek