AISpot

港大與清華提出 VAST,讓離線 RL 自適應選擇價值跨度

機器之心新聞報導研究

香港大學與清華大學 AIR 團隊提出離線強化學習框架 VAST,讓智慧體自適應選擇價值更新的時間跨度與未來子目標,不再依賴固定步長的 n-step TD 或動作分塊。VAST 用輔助價值函式 G-function 估計從當前狀態經 k 步到某未來狀態的期望折扣回報,由拼接策略聯合挑選子目標與跨度;執行策略只依據狀態與子目標生成動作,推理時用 Q 函式拒絕取樣。

把自舉落點的選擇與跨度大小交給同一個拼接策略聯合學習,併為 stitching Bellman 運算元給出收縮性證明;在 OGBench 50 個任務上對比 8 個基線,對做離線 RL 與長程決策的研究者最有參考價值。

原標題:NeurIPS 2026 | 港大&清华提出价值缝合VAST,让长程决策学习自适应选择时间尺度
閱讀原文

評分64 / 70(平均 67,門檻 65)
狀態精選

相關報導

量子位● 精選AI 評分85

VAST 開源即時世界模型 EdenLive,單張 5090 跑 720P 超 24FPS

VAST 正式開源即時世界模型 EdenLive,同步開放模型權重、推理程式碼、技術報告與端到端 Demo。它把世界狀態交給上游互動系統維護,自身只做即時渲染:單張消費級 RTX 5090、720P 下,5B 模型生成速度超 24FPS,端到端延遲百毫秒級,可連續生成分鐘級畫面。模型接收參考畫面、目標首幀與提示詞三類輸入,支援寫實、二次元等畫風,可用於遊戲原型預覽、影片重渲染與具身資料增強;

量子位● 精選AI 評分82

何愷明團隊發布視覺原生 Harness 框架 VISTA

何愷明團隊提出視覺原生 Harness 框架 VISTA,讓現有多模態模型無需重新訓練,就能儲存原始畫面並在推理時按需回看、放大細節。VISTA 把環境返回的每幀畫面按回合號、幀號索引存到上下文之外,預設只向模型展示最後一幀,需要時用 inspect 工具調取歷史畫面。搭配該框架,Claude Opus 5.0 通關 ARC-AGI-3 全部 25 個公開遊戲,動作效率得分滿分 100,所用動作數比人類首次遊玩基線少 57.4%;

機器之心● 精選AI 評分80

Recursia 零樣本長時機器人操作超輝達 ASPIRE 最高 15.1 個百分點

研究團隊提出具身 RSI 系統 Recursia,通過內外雙層迴圈讓機器人從執行經驗中改進共享執行棧,在 LIBERO-Pro Long 零樣本長時操作的位置/任務擾動下成功率達 28.4%/53.4%,比輝達 ASPIRE 高 5.8/15.1 個百分點。共享棧分為工具、技能、交接、驗證四層,候選修改需經通用性檢查、機制測試及父子版本配對比較。

機器之心● 精選AI 評分68

普林斯頓 Elad Hazan 回顧線上凸最佳化二十年,談 AI 與數學

普林斯頓大學教授 Elad Hazan 發表長文,回顧線上凸最佳化(OCO)二十年,串起 Online Newton Step、AdaGrad 等現代 AI 核心方法的脈絡。他回憶了與 Satyen Kale、John Duchi、Yoram Singer 合作提出 AdaGrad 的過程,以及 ONS 論文被 FOCS/STOC 拒稿的經歷;OCO 的 regret minimization 與自適應更新思想後來進入 bandit、線上控制與序列建模。