機(jī)器之心發(fā)布
機(jī)器之心編輯部
近期開(kāi)源的 Deepseek V3,讓國(guó)產(chǎn) MoE 大模型在全球圈粉無(wú)數(shù),一躍成為中國(guó) AI 圈的頂流擔(dān)當(dāng)。
而作為中國(guó)具身智能的領(lǐng)軍企業(yè),智元也在2024年底放了個(gè)大招,攜手上海人工智能實(shí)驗(yàn)室等單位重磅開(kāi)源了AgiBot World,具身智能領(lǐng)域也迎來(lái)了「ImageNet」時(shí)刻!
AgiBot World(智元世界) 一個(gè)匯集百萬(wàn)真實(shí)機(jī)器人數(shù)據(jù)的開(kāi)源數(shù)據(jù)集。在這個(gè)具身數(shù)據(jù)的世界里,機(jī)器人不再只是進(jìn)行簡(jiǎn)單的桌面任務(wù),而是全方位融入我們的日常生活。機(jī)器人和人類和諧相處世界的大幕,正在徐徐拉開(kāi)。
2024,哪個(gè)場(chǎng)景最符合你對(duì)未來(lái)機(jī)器人的想象?
作你的「家務(wù)管家」,洗衣、做飯都交給它?
還是化身「打工人」在超市揀貨、收銀、整理貨架?
亦或是工廠里的「永動(dòng)機(jī)」,搬運(yùn)、打包,不斷電不下班?
這些「科幻片」里的場(chǎng)景已經(jīng)在路上了!
歡迎來(lái)到 AgiBot World,一個(gè)匯集百萬(wàn)真實(shí)機(jī)器人數(shù)據(jù)的開(kāi)源數(shù)據(jù)集。具身應(yīng)用,數(shù)據(jù)先行,作為具身領(lǐng)域的 ImageNet,智元世界有望成為引領(lǐng)我們進(jìn)入具身智能新時(shí)代的「通關(guān)密碼」,讓機(jī)器人的世界更加真實(shí),從此告別「NPC」人生!
項(xiàng)目開(kāi)源地址
HuggingFace:https://huggingface.co/agibot-world
Github:https://github.com/OpenDriveLab/agibot-world
項(xiàng)目主頁(yè):https://agibot-world.com/
是的,你沒(méi)看錯(cuò),加持了 AgiBot World 的百萬(wàn)真機(jī)數(shù)據(jù),機(jī)器人的控制已經(jīng)如此精細(xì)。現(xiàn)在就能在你家客廳優(yōu)雅地插花了。
整套動(dòng)作行云流水,用金屬制的機(jī)械手抓取,嬌嫩的花材也完好無(wú)損。
刷馬桶這事,等到機(jī)器人「出師」后也能放心交給他,再也不用全家抽簽確定誰(shuí)去刷了。
具身智能領(lǐng)域的 ImageNet 何時(shí)到來(lái)?
Open X-Embodiment, ICRA 2024
谷歌 DeepMind 通過(guò)整合來(lái)自 22 種不同本體機(jī)器人的數(shù)據(jù)構(gòu)建了 Open X-Embodiment數(shù)據(jù)集,但大部分?jǐn)?shù)據(jù)缺乏統(tǒng)一標(biāo)準(zhǔn)化的采集流程,且許多機(jī)器人構(gòu)型已經(jīng)過(guò)時(shí),數(shù)據(jù)質(zhì)量格式參差不齊,在機(jī)器人策略學(xué)習(xí)的過(guò)程中甚至?xí)䦷?lái)副作用。
為實(shí)現(xiàn)規(guī)范化的數(shù)據(jù)采集,來(lái)自斯坦福、伯克利、谷歌等構(gòu)建了DROID 數(shù)據(jù)集,盡管涵蓋了相對(duì)豐富的場(chǎng)景與技能,然而作者團(tuán)隊(duì)在后續(xù)研究中指出 DROID 存在大量低質(zhì)量數(shù)據(jù),從而給機(jī)器人的學(xué)習(xí)過(guò)程造成「困惑」。
一些具身大模型初創(chuàng)公司基于自采集的大規(guī)模高質(zhì)量雙臂機(jī)器人數(shù)據(jù)訓(xùn)練的模型展現(xiàn)出了整理、分揀、洗衣等執(zhí)行復(fù)雜動(dòng)作的能力,這進(jìn)一步印證了高質(zhì)量數(shù)據(jù)在當(dāng)前具身智能領(lǐng)域研究階段的重要性,但相關(guān)數(shù)據(jù)集目前僅在公司內(nèi)部使用,并未開(kāi)源。
AgiBot World
讓高質(zhì)量機(jī)器人數(shù)據(jù)觸手可及
為了進(jìn)一步推動(dòng)通用具身智能領(lǐng)域研究進(jìn)展,讓高質(zhì)量機(jī)器人數(shù)據(jù)觸手可及,作為上海模塑申城語(yǔ)料普惠計(jì)劃中的一份子,智元機(jī)器人攜手上海人工智能實(shí)驗(yàn)室、國(guó)家地方共建人形機(jī)器人創(chuàng)新中心以及上海庫(kù)帕思,重磅發(fā)布全球首個(gè)基于全域真實(shí)場(chǎng)景、全能硬件平臺(tái)、全程質(zhì)量把控的百萬(wàn)真機(jī)數(shù)據(jù)集開(kāi)源項(xiàng)目 AgiBot World。
這一里程碑式的開(kāi)源項(xiàng)目,旨在構(gòu)建國(guó)際領(lǐng)先的開(kāi)源技術(shù)底座,標(biāo)志著具身智能領(lǐng)域 「ImageNet 時(shí)刻」已到來(lái)。
通過(guò)匯聚頂尖資源與技術(shù)力量,各方將共同推動(dòng)具身智能發(fā)展新范式,加速人類邁向通用人工智能的新時(shí)代,在全球范圍內(nèi)奠定中國(guó)在這一前沿領(lǐng)域的領(lǐng)導(dǎo)地位。
AgiBot World 是全球首個(gè)基于全域真實(shí)場(chǎng)景、全能硬件平臺(tái)、全程質(zhì)量把控的大規(guī)模機(jī)器人數(shù)據(jù)集。
相比于 Google 開(kāi)源的 Open X-Embodiment 數(shù)據(jù)集,AgiBot World 的長(zhǎng)程數(shù)據(jù)規(guī)模高出 10 倍,場(chǎng)景范圍覆蓋面擴(kuò)大 100 倍,數(shù)據(jù)質(zhì)量從實(shí)驗(yàn)室級(jí)上升到工業(yè)級(jí)標(biāo)準(zhǔn)。
多樣任務(wù),十八般武藝樣樣精通
插內(nèi)存條的過(guò)程需要毫米級(jí)精細(xì)控制,稍有不慎可能導(dǎo)致設(shè)備損壞,如神經(jīng)纖維般靈敏的末端觸覺(jué)傳感器助力機(jī)器人精準(zhǔn)對(duì)接。
飯后勺筷碗盤層層堆疊在洗碗池中,在這條數(shù)據(jù)中,機(jī)器人將雜亂的餐具一一準(zhǔn)確無(wú)誤地整理至洗碗機(jī)相應(yīng)卡槽中,整理洗碗機(jī)的操作流程長(zhǎng)、動(dòng)作繁瑣。
熨衣服是個(gè)「精細(xì)活兒」,只見(jiàn)機(jī)器人雙手協(xié)作,一只手穩(wěn)穩(wěn)抓住襯衫的一角,另一只手精準(zhǔn)控制掛燙機(jī)與衣物的距離,細(xì)致地熨燙每一道褶皺,讓衣物煥發(fā)平整光澤。
對(duì)于大件物體搬運(yùn),單機(jī)器人難以完成。兩個(gè)機(jī)器人分工協(xié)作,可以分擔(dān)重量,也能實(shí)時(shí)調(diào)整位置與角度,以確保物體搬運(yùn)過(guò)程中穩(wěn)定安全。
AgiBot World 數(shù)據(jù)集收錄了八十余種日常生活中的多樣化技能,從抓取、放置、推、拉等基礎(chǔ)操作,到攪拌、折疊、熨燙等精細(xì)長(zhǎng)程、雙臂協(xié)同復(fù)雜交互,幾乎涵蓋了日常生活所需的絕大多數(shù)動(dòng)作需求。