在機(jī)器人技術(shù)的前沿探索中，一款名為AgiBot Digital World的大型仿真框架近日由智元機(jī)器人公司隆重推出。這一創(chuàng)新成果不僅為機(jī)器人操作技能的研發(fā)與應(yīng)用開辟了新路徑，還伴隨著海量仿真數(shù)據(jù)的開源，為行業(yè)內(nèi)的開發(fā)者與研究人員提供了寶貴的資源。
AgiBot Digital World專為機(jī)器人操作技能設(shè)計(jì)，集成了豐富多樣的三維資產(chǎn)、靈活的專家軌跡生成機(jī)制以及全面的模型評估工具。通過這些功能，該框架能夠高度逼真地模擬各種訓(xùn)練場景，為機(jī)器人的具身仿真服務(wù)提供了強(qiáng)有力的支持。
該框架的三維資產(chǎn)庫包含了眾多精細(xì)建模的物體、場景和機(jī)器人模型，這些資產(chǎn)通過人工建模、三維重建技術(shù)以及生成式人工智能等手段轉(zhuǎn)化而來，能夠滿足復(fù)雜多變的機(jī)器人操作任務(wù)需求?；贜VIDIA Isaac-Sim仿真平臺，AgiBot Digital World提供了高度真實(shí)的視覺渲染和精確的物理模擬，使得仿真情景與真實(shí)世界之間的差異微乎其微。
在AgiBot Digital World中，光透過窗戶的自然投射、物體隨機(jī)器人動作而變化的倒影等視覺效果都顯得異常自然。該框架還能模擬出真實(shí)世界的物理效應(yīng)，如機(jī)器人將小車放入籃子時(shí)產(chǎn)生的晃動等，進(jìn)一步增強(qiáng)了仿真的真實(shí)感。
AgiBot Digital World引入了多模態(tài)大模型，支持基于資產(chǎn)庫自動生成操作任務(wù)，并根據(jù)指定任務(wù)自動創(chuàng)建操作場景和物體布局。這一功能使得開發(fā)者能夠根據(jù)實(shí)際訓(xùn)練需求，靈活創(chuàng)建多樣化、復(fù)雜度可調(diào)的仿真任務(wù)與仿真環(huán)境，實(shí)現(xiàn)了數(shù)據(jù)的閉環(huán)。
在數(shù)據(jù)生成方面，AgiBot Digital World提供了多元化專家軌跡生成策略，包括真機(jī)操作數(shù)字孿生、具身智能體自動生成以及仿真遙操作等。這些策略能夠生成具有多樣性和魯棒性的專家軌跡數(shù)據(jù)，增強(qiáng)模型在真實(shí)環(huán)境中的泛化能力。同時(shí)，數(shù)據(jù)生成引擎還支持包括多視角RGB-D圖像、觸覺信息、機(jī)器人狀態(tài)信息在內(nèi)的多模態(tài)數(shù)據(jù)，為策略學(xué)習(xí)提供了豐富的數(shù)據(jù)源。
此次智元機(jī)器人還開源了海量規(guī)模的仿真數(shù)據(jù)集AgiBot Digital World Dataset，該數(shù)據(jù)集涵蓋了家居、商超、辦公、餐飲和工業(yè)五大場景，包含了超過180種具體物品和9種主要材質(zhì)，以及12種核心技能。這些數(shù)據(jù)具有高質(zhì)量、高泛化性、任務(wù)多樣性和應(yīng)用靈活性等特點(diǎn)，為各類場景應(yīng)用提供了堅(jiān)實(shí)的開發(fā)基礎(chǔ)和廣泛的應(yīng)用可能性。
AgiBot Digital World的推出和海量數(shù)據(jù)的開源，無疑將加速具身智能技術(shù)的開發(fā)與應(yīng)用。這一舉措不僅降低了行業(yè)研發(fā)門檻，還為多技能訓(xùn)練和多任務(wù)泛化執(zhí)行提供了有力支持。隨著技術(shù)的不斷進(jìn)步和應(yīng)用場景的不斷拓展，AgiBot Digital World有望成為機(jī)器人技術(shù)領(lǐng)域中一顆璀璨的明珠。
