在機(jī)器人技術(shù)的前沿探索中,一款名為AgiBot Digital World的大型仿真框架橫空出世,由智元機(jī)器人公司自主研發(fā)并正式推出。這一創(chuàng)新框架專為機(jī)器人操作技能的研究與應(yīng)用設(shè)計,旨在提供一套靈活、高效且統(tǒng)一的仿真數(shù)據(jù)生成與評測方案。
AgiBot Digital World集成了海量的三維資產(chǎn),這些資產(chǎn)不僅種類繁多,而且逼真度高,能夠滿足復(fù)雜機(jī)器人操作任務(wù)的仿真需求。通過精細(xì)的人工建模、三維重建技術(shù)以及生成式人工智能(AIGC)的轉(zhuǎn)化,該框架構(gòu)建了一個豐富多樣的物體、場景和機(jī)器人模型庫。這些資產(chǎn)為機(jī)器人提供了高保真的模擬訓(xùn)練場景,使得機(jī)器人在虛擬環(huán)境中能夠?qū)W習(xí)到接近真實世界的操作技能。
該框架基于NVIDIA Isaac-Sim仿真平臺,能夠提供高度逼真的視覺渲染和精確的物理模擬。無論是光透過玻璃窗投射的光影,還是隨著機(jī)器人動作而變動的倒影,都顯得異常自然。AgiBot Digital World還能模擬出真實世界的物理效應(yīng),如機(jī)器人將小車放入籃子時產(chǎn)生的晃動,進(jìn)一步增強(qiáng)了仿真的真實感。
AgiBot Digital World引入了多模態(tài)大模型,支持基于資產(chǎn)庫自動生成操作任務(wù),并根據(jù)指定任務(wù)自動生成操作場景和物體布局。這一功能使得仿真任務(wù)的創(chuàng)建變得靈活多樣,且復(fù)雜度可調(diào),從而實現(xiàn)了數(shù)據(jù)的閉環(huán)。例如,在書房場景中,機(jī)器人可以通過一鍵召喚取書任務(wù),系統(tǒng)自動捕捉到環(huán)境中的書架,并根據(jù)需要調(diào)用資產(chǎn)庫補(bǔ)充物體或切換至適配場景。
智元機(jī)器人還同步開源了海量規(guī)模的仿真數(shù)據(jù)集AgiBot Digital World Dataset。該數(shù)據(jù)集涵蓋了家居、商超、辦公、餐飲和工業(yè)五大場景,其中家居場景最為豐富,占比達(dá)到36%。數(shù)據(jù)集包含了超過180種具體物品,涵蓋9大品類和9種主要材質(zhì)。還囊括了12種核心技能,如抓、放、插、倒等,能夠靈活應(yīng)對各種任務(wù)。這些數(shù)據(jù)具有高質(zhì)量、快速泛化、任務(wù)多樣和應(yīng)用靈活等特點,為機(jī)器人操作技能的訓(xùn)練提供了堅實的基礎(chǔ)。
AgiBot Digital World的推出和海量仿真數(shù)據(jù)的開源,標(biāo)志著智元機(jī)器人在具身智能技術(shù)開發(fā)應(yīng)用方面邁出了重要一步。這一舉措不僅為各類場景應(yīng)用提供了堅實的開發(fā)基礎(chǔ)和廣泛的應(yīng)用可能性,還有望降低行業(yè)研發(fā)門檻,極大程度地加速具身智能的開發(fā)和應(yīng)用進(jìn)程。