在機器人技術領域的最新進展中,智元機器人公司近期宣布了一項重大突破,推出了名為AgiBot Digital World的大型仿真框架。這一創新平臺旨在為機器人操作提供全面且靈活的仿真數據生成方案,同時預訓練了大規模的仿真數據,并建立了統一的模型評測標準。
AgiBot Digital World不僅是一個仿真框架,更是專為機器人操作技能研究與應用設計的綜合性工具。它集成了海量的高保真三維資產、多樣化的專家軌跡生成機制,以及全面的模型評估工具。通過模擬各種訓練場景,AgiBot Digital World能夠生成逼真的機器人操作數據,為機器人提供接近真實世界的訓練環境。
AgiBot Digital World的三維資產庫包含豐富多樣的物體、場景和機器人模型,這些資產通過精細的人工建模、三維重建技術和生成式人工智能(AIGC)技術轉化而來,能夠滿足復雜機器人操作任務的仿真需求。從家居用品到工業設備,從常見的家具到罕見的工具,AgiBot Digital World都提供了詳盡的模擬。
基于NVIDIA Isaac-Sim仿真平臺,AgiBot Digital World提供了高度逼真的視覺渲染和精確的物理模擬。仿真場景中的光影效果、物體的材質和物理行為都得到了精細的再現,使得仿真情景與真實世界之間的域差異最小化,從而提升了感知和交互的真實感。
除了逼真的視覺和物理模擬外,AgiBot Digital World還引入了多模態大模型,支持基于資產庫自動生成操作任務,并根據指定任務自動生成操作場景和物體布局。這一功能使得用戶能夠根據實際訓練需求,靈活創建多樣化、復雜度可調的仿真任務與仿真環境,實現了數據的閉環生成。
在數據生成方面,AgiBot Digital World提供了多元化的專家軌跡生成策略。通過真機操作數字孿生、具身智能體自動生成和仿真遙操作等方式,AgiBot Digital World能夠生成豐富多樣的專家軌跡數據,這些數據具有多樣性和魯棒性,有助于提升模型在真實環境中的泛化能力。
智元機器人還開源了海量規模的仿真數據集AgiBot Digital World Dataset。該數據集涵蓋了家居、商超、辦公、餐飲和工業五大場景,包含了超過180種具體物品、9種常見材質和12種核心技能。這些數據具有高質量、高泛化性和任務多樣性等特點,能夠為機器人操作提供堅實的訓練基礎。
通過AgiBot Digital World和AgiBot Digital World Dataset,智元機器人為機器人技術的研究和應用提供了強有力的支持。這些工具和數據的開源,將有望降低行業研發門檻,加速具身智能技術的開發和應用,推動機器人技術向更高水平發展。