人類只需要演示五次,就能讓機(jī)器人學(xué)會(huì)一項(xiàng)復(fù)雜技能。
英偉達(dá)實(shí)驗(yàn)室,提出了機(jī)器人訓(xùn)練數(shù)據(jù)缺乏問題的新解決方案 ——DexMimicGen。五次演示之后,DexMimicGen 就可以直接模仿出 1000 個(gè)新的 demo。
而且可用性強(qiáng),用這些新 demo 訓(xùn)練出的機(jī)器人,在仿真環(huán)境中的任務(wù)成功率可以高達(dá) 97%,比用真人數(shù)據(jù)效果還要好。
參與此項(xiàng)目的英偉達(dá)科學(xué)家范麟熙(Jim Fan)認(rèn)為,這種用機(jī)器訓(xùn)練機(jī)器的方式,解決了機(jī)器人領(lǐng)域最大的痛點(diǎn)(指數(shù)據(jù)收集)。
同時(shí),Jim Fan 還預(yù)言:
機(jī)器人數(shù)據(jù)的未來是生成式的,整個(gè)機(jī)器人學(xué)習(xí)流程的未來也將是生成式的。
值得一提的是,DexMimicGen 三名共同一作都是李飛飛的“徒孫”,具體說是德克薩斯大學(xué)奧斯汀分校(UT 奧斯?。┲斫淌谥煊窨桑╕uke Zhu)的學(xué)生。
而且三人均為華人,目前都在英偉達(dá)研究院實(shí)習(xí)。
5 次演示,生成 1000 條數(shù)據(jù)
如前所述,DexMimicGen 可以僅根據(jù)人類的 5 次演示,生成 1000 個(gè)新 DEMO。
在整個(gè)實(shí)驗(yàn)中,作者設(shè)置了 9 個(gè)場景,涵蓋了 3 種機(jī)器人形態(tài),共進(jìn)行了 60 次演示,獲得了 21000 多個(gè)生成 DEMO。
在仿真環(huán)境當(dāng)中,用 DexMimicGen 生成數(shù)據(jù)訓(xùn)練出的策略執(zhí)行整理抽屜這一任務(wù),成功率可達(dá) 76%,而單純使用人工數(shù)據(jù)只有 0.7%。