清北團(tuán)隊領(lǐng)航，銀河通用、靈初智能、星海圖的最新進(jìn)展

具身智能創(chuàng)業(yè)如火如荼，技術(shù)路線是否收斂、以及數(shù)據(jù)來源的選擇，都是大家一直關(guān)心的問題。最近清華北大的團(tuán)隊密集發(fā)布了很多研究成果，我們或許可以從中分析出一些趨勢。

23 年初成立的銀河通用背后是前如布科技聯(lián)創(chuàng)尹方鳴和姚騰洲、科學(xué)家是北大助理教授王鶴。銀河通用是低成本仿真路線的擁護(hù)者，經(jīng)過 2 年努力于近期重磅發(fā)布了 GraspVLA，思路與 RoboCasa、RoboGen 等類似，在海量合成的仿真環(huán)境中合成機(jī)器人數(shù)據(jù)。但 GraspVLA 只關(guān)注抓取任務(wù)，將預(yù)訓(xùn)練的 AnyGrasp 模型部署到仿真中采集大量數(shù)據(jù)來訓(xùn)練一個 VLA。在仿真中可以加入很多隨機(jī)化、以提升 VLA 的泛化性。

2024 年 9 月成立的靈初智能，CEO 是前京東機(jī)器人總裁王啟斌、以及機(jī)器人算法負(fù)責(zé)人柴曉杰、李飛飛學(xué)生陳源培，背后科學(xué)家包括北大助理教授楊耀東和梁一韜。

與銀河通用類似，靈初智能也是在仿真環(huán)境中大規(guī)模預(yù)訓(xùn)練模型，但在模仿學(xué)習(xí)中加入了強(qiáng)化學(xué)習(xí)技術(shù)、以及真機(jī)數(shù)據(jù)對齊微調(diào)訓(xùn)練，使得即使只用少量仿真和真機(jī)數(shù)據(jù)也能做到很泛化的復(fù)雜任務(wù)，實現(xiàn)不同技能順滑串聯(lián)操作。2024 年 12 月底發(fā)布的 Psi R0 模型完成了雙手協(xié)作長程的泛化打包任務(wù)，已展現(xiàn)出了該模型能實現(xiàn)真正商業(yè)化的強(qiáng)大潛力。

靈初智能此前的其他成果，比如 lego 組裝也是長程的靈巧手任務(wù)，可以突破過去強(qiáng)力抓取的能力邊界、完成更靈活的抓取和靈巧動作。根據(jù)之前的公開信息，靈初智能將于 3 月份發(fā)布自研本體以及更泛化的具身大模型。

在數(shù)據(jù)選擇方面，23 年 9 月成立的清華系星海圖持完全不同的觀點，他們認(rèn)為數(shù)據(jù)價值上，真機(jī)數(shù)據(jù) > 互聯(lián)網(wǎng)數(shù)據(jù) > 仿真數(shù)據(jù)。星海圖 CEO 是 Momenta 前執(zhí)行董事高繼揚(yáng)，科學(xué)家包括清華助理教授趙行和許華哲。他們計劃今年發(fā)布 100 萬條真機(jī)數(shù)據(jù)、明年發(fā)布 1000 萬條真機(jī)數(shù)據(jù)。

星海圖計劃采用真機(jī)數(shù)據(jù)為主來預(yù)訓(xùn)練具身大模型、而不是靈初和銀河那種大規(guī)模仿真數(shù)據(jù)預(yù)訓(xùn)練。但以大規(guī)模真機(jī)數(shù)據(jù)為主存在 diverse 不足的問題，無法涌現(xiàn)泛化。

在仿真數(shù)據(jù)方面，星海圖強(qiáng)調(diào) Real2Sim2Real 后訓(xùn)練。仿真數(shù)據(jù)只作為后訓(xùn)練的一個強(qiáng)化劑，將真實數(shù)據(jù)在仿真中加入隨機(jī)化來擴(kuò)充 1000 倍，以實現(xiàn)更高的成功率和更好的落地效果。

三家清北團(tuán)隊在算法和數(shù)據(jù)選擇上略有不同。靈初智能在算法上強(qiáng)調(diào)強(qiáng)化學(xué)習(xí)、銀河在數(shù)據(jù)上強(qiáng)調(diào)仿真、星海圖強(qiáng)調(diào)真實數(shù)據(jù)。不過各家都采用了仿真和真實數(shù)據(jù)結(jié)合的方法，只是在預(yù)訓(xùn)練和后訓(xùn)練上強(qiáng)調(diào)不同的數(shù)據(jù)比例。

期待這幾家準(zhǔn)獨角獸公司在未來帶來更多的驚喜。清華北大是具身智能創(chuàng)新的先鋒，近期還有很多有意思的成果。

比如清華星動紀(jì)元 ERA-42、北大與國地共建具身智能中心 RoboMind、北大與智元 OmniManip、清華千尋智能 CoPa 和 Data Scaling Law 等工作都很值得分析。