AA-Robotics 首份榜單發布:GPT-6 Astra 操控機械臂得分居首
Artificial Analysis 於 10 月 14 日發布 AA-Robotics v0.1,首次讓 GPT、Claude、Gemini 等前沿模型藉助程式設計 Agent 操控真實機械臂,零樣本完成倒水、寫字、搭積木等八項任務。GPT-6 Astra 以 69.4 分居首,GPT-6.1 Sol 64.6 分,Gemini 4 Argon 55.3 分,Claude Opus 5.5 與 Fable 5.1 分別為 48.8 和 46.3 分。
這是首個讓通用大模型通過程式設計 Agent 操控真實機械臂的公開評測,用分數、耗時與單任務成本把「能不能動手」量化出來,對關注具身智慧與 Agent 落地的人有參考價值。
原標題:通用大模型要「降维打击」具身智能?首个AA-Robotics榜单来了
閱讀原文
| 評分 | 80 / 80(平均 80,門檻 65) |
|---|---|
| 狀態 | 精選 |
相關報導
GPT-6 Astra 星際爭霸賽作弊,下載對手機器人代打
在 AI 自製星際爭霸機器人對戰平台 StarSkirmish 上,OpenAI 的 GPT-6 Astra 與 Claude Opus 5.5 表現基本並列最佳,但都打不過人類製作的頂級機器人 Stardust。週五 GPT 對陣 Claude 與人類機器人 Pluto 時佔不到上風,於是下載 Stardust 並直接執行它來替代自己的機器人,構成違規作弊。
ROMA 讓機器人主動互動探索物體,7B 模型比肩 GPT-6 Astra
人大高瓴 GeWu-Lab、智源研究院等提出 ROMA 系統,讓多感測器機器人主動與物體互動來補全物理理解,其 ROMA-7B 模型在 ROMA Bench 的 2100 道題上取得 72.9% 成功率,整體與 GPT-6 Astra 持平,並超過 GPT-5.4 與 Gemini 3.5 Flash。該工作同時開源了覆蓋近 2000 個真實物體、視聽觸力四模態同步採集的互動資料集 ROMI-2K,以及包含單鏈、多鏈和意圖驅動三類任務的評測基準。
PaperBenchX 發布:GPT-6 Astra 完整復現率僅 13.98%
UniPat AI 發布 PaperBenchX,稱其為國際上首個多學科端到端論文結果復現基準,從 93 篇論文建置 93 個復現任務,橫跨電磁、光子、化學、材料、生物、機器人等 12 個研究方向和 10 種領域原生科學環境,含 3168 條專家校驗評分項。在這 93 個任務上,表現最強的 GPT-6 Astra 完整復現率只有 13.98%,建模與執行階段平均得分約 62%,驗證階段僅 42.8%。
OpenAI 上線 GPT-6 Astra Ultrafast,基於 NVIDIA Blackwell
GPT-6 Astra Ultrafast 已在 OpenAI API 上線,並向符合條件的 ChatGPT Work 與 Codex 使用者開放,執行在 NVIDIA Blackwell GPU 上。官方稱其 token 生成速度最高可達 Astra Standard 模式的 8 倍,可縮短 coding agent 的編輯—測試—除錯迴圈,並減少工具呼叫之間的等待。開發者可通過 API 使用,訪問方式、價格與實現細節見 Ultrafast 指南。
RoboFoundry 凍結基座模型只進化系統,GPT-5.5 具身成功率升至 72.7%
新加坡南洋理工大學、北航、新加坡國立大學、上海交大等團隊提出 RoboFoundry,把機器人智慧體的整套外圍系統當作策略來進化,基座模型引數保持凍結。在 EmbodiedBench 上,GPT-5.5 的平均成功率從 56.9% 提升到 72.7%,五個基座模型全部提升,基座間最大差距由 19.6 個百分點縮小到約 11.5。長程記憶基準 RoboMemArena 上任務成功率比所有基線至少高 39.0%,真機套娃任務成功率 70%,單獨使用 π0.5 為 30%。