在機器人技術領域的最新動態中,智元機器人攜手上海AI Lab、國家地方共建人形機器人創新中心及上海庫帕思,共同推出了名為AgiBot World的開源項目。該項目標志著全球首個基于真實全域場景、全能硬件平臺及嚴格質量管控的大規模機器人數據集的誕生。
據12月30日的消息,AgiBot World數據集相較于Google的Open X-Embodiment數據集,在長程數據規模上提升了10倍,場景覆蓋范圍擴大了100倍,數據質量更是從實驗室級別躍升至工業級標準。這一突破性的進展,無疑為機器人技術的研究與應用注入了新的活力。
AgiBot World數據集誕生于智元機器人自建的大規模數據采集工廠與應用實驗基地,該基地模擬了家居、餐飲、工業、商超和辦公五大核心場景,共包含超過100種真實場景。其中,家居場景占比40%,餐飲、工業各占20%,商超和辦公則各占10%。尤為80%的任務為長程任務,時長主要集中在60秒到150秒之間,且這些任務涵蓋了多個原子技能,其復雜程度是DROID和OpenX-Embodiment工作的5倍。該數據集已包含3000多種物品,且仍在持續擴展中。
AgiBot World數據集的采集工作由一款輪式雙臂機器人完成。這款機器人配備了8個攝像頭環繞式布局,擁有6個主動自由度的靈巧手,標配末端六維力傳感器,并可配備高精度視觸覺傳感器,全身最高可達32個自由度。憑借這些先進的硬件配置,機器人能夠感知力的微小變化,從容完成各種精細操作。
在實際演示中,這款機器人展示了其在日常生活中的廣泛應用潛力。例如,它能夠依次將洗碗池中的碗碟放入洗碗機中,并關上洗碗機的門啟動清洗;通過雙手協作,操作掛燙機對衣物進行熨燙處理;靈活使用掃把清掃地面垃圾;甚至還能平穩地使用刷子清潔馬桶。在商業服務和工廠生產場景方面,機器人也展現出了精準的操作能力,如拿起貨物、掃碼、打包等。
在更復雜的操作中,如插內存條,機器人展現出了毫米級的精細控制能力,成功實現了內存條與設備之間的精準對接。兩臺機器人還能進行協作,共同搬運體積較大的物體,如桌子,且在搬運過程中會注意速度、角度,確保物體平穩地搬運至指定地點。
展望未來,智元機器人計劃陸續開源千萬仿真數據,以支持更泛化和更通用的大模型訓練。同時,他們還將發布具身基座大模型,可支持模型微調。智元機器人還將推出全套工具鏈,實現采集、訓練和評測的閉環,為機器人技術的進一步研究與應用提供強有力的支持。