AISpot

港大 EgoWild2Dex 用 538.9 小時人類第一視角資料訓練機器人

機器之心官方公告研究

香港大學 MMLab 提出 EgoWild2Dex,直接用 538.9 小時未經編排的人類第一視角資料訓練雙臂機器人,每個下游任務只需不到 1 小時真機資料,拆快遞、用熱熔膠槍固定手辦、製作冷飲等長時序任務平均成功率達 96.7%。方法核心是 GeoFormer 幾何變換模組,把晃動的人類視角對齊到機器人視角,處理速度比傳統投影加修復流程快 21.9 倍,再將人類、手套與真機資料統一到機器人動作空間做漸進式聯合訓練。

首次證明保留視角晃動、雜亂背景的“髒”人類第一視角資料可用於訓練雙臂機器人,真機資料不到 1 小時即達 96.7% 成功率,並同步公開大規模資料集,對做機器人 VLA 與模仿學習的研究者最有用。

原標題:538小时「极脏」人类数据,真机不到1小时:港大让机器人学会拆快递、打胶枪、做冷饮
閱讀原文

評分80 / 76(平均 78,門檻 65)
狀態精選

相關報導

機器之心● 精選AI 評分80

董豪團隊提出 HIL-UMI:人類示範時即可採集機器人後訓練資料

董豪團隊聯合啟元機器人、北京大學、西安交通大學提出 HIL-UMI:人手持夾爪示範時,模型同步預測動作並標出與人類操作的分歧,從而在不執行機械臂的情況下采集後訓練所需資料。該方法以 π0.5 為基礎模型,在 Franka 機械臂上測試整理桌面、折毛巾、疊方塊、蓋章四項任務,三輪更新後平均任務進度分數從 62.3 升至 94.8,同等資料量下常規 SFT 僅從 44.3 升至 58.0。整理桌面任務中其採集效率為 HG-DAgger 的 5.63 倍,最終得分 96 比 91。

機器之心● 精選AI 評分65

Manifold AI 的 R²SI 登頂 RoboDojo 榜,超越 GPT-6-Astra

Manifold AI 流形空間的 WorldScape R²SI 框架在機器人學習基準 RoboDojo 的 Agent Track 登頂,超過 GPT-6-Astra 與輝達 GR00T-N1.7。該框架由內外雙層 Agent 組成,內層執行任務,外層跨輪次復盤、修訂 Skill 並訓練 reactive model(WSP)。在 push_T 任務中,動作步數從首輪 723 步(超出 600 步預算)降至 596 步,再降至 389 步,降幅約 35%。

機器之心● 精選AI 評分80

Recursia 零樣本長時機器人操作超輝達 ASPIRE 最高 15.1 個百分點

研究團隊提出具身 RSI 系統 Recursia,通過內外雙層迴圈讓機器人從執行經驗中改進共享執行棧,在 LIBERO-Pro Long 零樣本長時操作的位置/任務擾動下成功率達 28.4%/53.4%,比輝達 ASPIRE 高 5.8/15.1 個百分點。共享棧分為工具、技能、交接、驗證四層,候選修改需經通用性檢查、機制測試及父子版本配對比較。

機器之心● 精選AI 評分75

ROMA 讓機器人主動互動探索物體,7B 模型比肩 GPT-6 Astra

人大高瓴 GeWu-Lab、智源研究院等提出 ROMA 系統,讓多感測器機器人主動與物體互動來補全物理理解,其 ROMA-7B 模型在 ROMA Bench 的 2100 道題上取得 72.9% 成功率,整體與 GPT-6 Astra 持平,並超過 GPT-5.4 與 Gemini 3.5 Flash。該工作同時開源了覆蓋近 2000 個真實物體、視聽觸力四模態同步採集的互動資料集 ROMI-2K,以及包含單鏈、多鏈和意圖驅動三類任務的評測基準。

量子位AI 評分43

智元發布世界-動作模型 GE-Act 2.0,陌生場景成功率提升約 2.6 倍

智元發布世界-動作模型 GE-Act 2.0,把「預測未來」與「生成動作」整合進同一模型,訓練資料從 300 小時擴充套件到 3 萬小時。在陌生場景、陌生物體上不做額外訓練直接測試,其中一款機器人總體成功率從 17.1% 提升至 44.1%,陌生場景成功率提升約 2.6 倍;在 RTX 5090 上生成一個連續動作塊約需 104 毫秒。