智東西
2024-12-30 15:15發(fā)布于北京智東西官方賬號
機器人前瞻(公眾號:robot_pro)
作者|許麗思
編輯|漠影
近三個月里,智元機器人的第三次開源行動來了。
機器人前瞻12月30日報道,今天,元機器人聯(lián)合上海AI Lab、國家地方共建人形機器人創(chuàng)新中心以及上海庫帕思發(fā)布了開源項目AgiBot World,這是全球首個基于全域真實場景、全能硬件平臺、全程質(zhì)量把控的大規(guī)模機器人數(shù)據(jù)集。
相比于Google開源的 Open X-Embodiment 數(shù)據(jù)集,AgiBot World 的長程數(shù)據(jù)規(guī)模高出10倍,場景范圍覆蓋面擴大100倍,數(shù)據(jù)質(zhì)量從實驗室級上升到工業(yè)級標準。
據(jù)了解,AgiBot World誕生于智元機器人自建的大規(guī)模數(shù)據(jù)采集工廠與應(yīng)用實驗基地,涵蓋了家居、餐飲、工業(yè)、商超和辦公五大核心場景。包含超過 100 種真實場景,按家居(40%)、餐飲(20%)、工業(yè)(20%)、商超(10%)和辦公(10%)進行分布。此外,80% 的任務(wù)為長程任務(wù),任務(wù)時長集中在 60 秒到 150 秒之間,且涵蓋多個原子技能,是 DROID 和 OpenX-Embodiment 工作的 5 倍。該數(shù)據(jù)集包含了 3000 多種物品,基本涵蓋了這五大場景,并且仍在不斷擴展和豐富中。
▲開源的數(shù)據(jù)集涵蓋的五大場景
▲開源的數(shù)據(jù)集在各大場景中不同的應(yīng)用方向
采集數(shù)據(jù)的是一款輪式雙臂機器人,8個攝像頭環(huán)繞式布局,能配備具有6個主動自由度的靈巧手,標配末端六維力傳感器,并可配備高精度視觸覺傳感器,全身最高32個自由度,能夠感知力的微小變化從容完成各種精細操作。
在演示場景中,這款機器人覆蓋了眾多日常生活中的家務(wù)勞動場景。例如,機器人能夠?qū)⑾赐氤刂械脑S多碗碟依次放入洗碗機中,最后關(guān)上洗碗機的門并啟動。
機器人可以通過雙手協(xié)作的方式,操作掛燙機對衣物進行熨燙處理。
機器人也會通過雙手,靈活操作掃把對地面上的各種垃圾進行清掃處理。
就連洗手間的清潔工作,機器人也可以完美應(yīng)付,已經(jīng)能夠平穩(wěn)地使用刷子對馬桶進行清潔。
在商業(yè)服務(wù)、工廠生產(chǎn)場景方面上,機器人能夠精準拿起貨物,完成掃碼、打包等操作。
機器人可以在流水線上,用夾爪穩(wěn)穩(wěn)地夾起物品,然后放置到箱子中,完成一系列打包工作。
插內(nèi)存條的過程需要毫米級精細控制,配備了末端觸覺傳感器的機器人能夠?qū)崿F(xiàn)內(nèi)存條與設(shè)備之間的精準對接。
在多機協(xié)作方面,兩臺機器人可以合作進行體積較大的物體例如桌子的搬運,在搬運過程中還會注意速度、角度,把物體平穩(wěn)地搬運至指定地點。
據(jù)了解,智元機器人后續(xù)將將陸續(xù)開源千萬仿真數(shù)據(jù),以支持更泛化和更通用的大模型訓練,也將發(fā)布具身基座大模型,可支持模型微調(diào)。另外,智元機器人還會發(fā)布全套工具鏈,實現(xiàn)采集、訓練和評測閉環(huán)。