AISpot

復旦與南洋理工提出 SimpleVLN,不改模型主幹重新整理導航 SOTA

機器之心新聞報導研究開源

復旦大學、南洋理工大學等提出 SimpleVLN,在不改動多模態大模型主幹、不額外增加專用導航模組的前提下,重新整理視覺語言導航的 SOTA。該方法把每次模型呼叫都當作一次獨立決策,只輸入指令、當前畫面和篩選後的歷史觀測,其中早期幀均勻取樣,並保留最新一幀;每次推理輸出一段連續動作,也就是動作塊,使成功率從 45.6% 提升到 53.6%。訓練分三階段:SFT、DAgger 和 DAPO 強化學習。DAgger 使 R2R-CE 的成功率從 57.9% 提升到 65.4%;

這項工作證明不改模型主幹、僅靠觀測篩選、動作塊與三段式訓練就能在兩項導航基準上超過專用方案,並給出四足機器人實測與 293 毫秒延遲,對做具身智慧和 MLLM 落地的人有參考價值。

原標題:大道至简!复旦×南洋理工提出SimpleVLN,用原生MLLM刷新导航SOTA
閱讀原文

評分70 / 77(平均 73,門檻 65)
狀態精選

相關報導

機器之心● 精選AI 評分77

人大高瓴與百度等開源 LoopVL:迴圈 Transformer 擴充套件到視覺語言模型

人大、百度、清華等機構開源視覺語言模型 LoopVL,把迴圈 Transformer 擴充套件到多模態:僅 1B 語言主幹、0.14T 訓練 token,就在 MMMU-Pro、MathVision 等評測上追平或超過用約 36T token 訓練的 Qwen3.5-2B、InternVL3.5-2B。模型以 32 層引數展開 128 次層呼叫(H2L3×2),影像只編碼一次,後續迴圈持續更新視覺—語言狀態;

機器之心● 精選AI 評分75

NV-CoT 改用連續座標做視覺思維鏈,入選 NeurIPS Oral

南洋理工大學、中國科大、新加坡國立大學與微軟研究院提出 NV-CoT,讓多模態大模型直接輸出連續數值座標來框選影像區域,取代把邊界框寫成文字 token 的做法,該工作入選 NeurIPS 2026 Oral。方法在原有輸出頭之外加四個輕量線性層做座標迴歸,SFT 階段用迴歸損失,強化學習階段用 Laplace 分佈取樣邊界框,無需中間框標註。在 Vis-CoT-363K 驗證集上定位 IoU 從 47.3 升至 59.5;

機器之心● 精選AI 評分76

VLM 中間層隱空間存在可提取的三維場景拓撲

匹茲堡大學研究發現,視覺語言模型(VLM)的中間層隱空間保留了可提取的三維場景拓撲。研究先用物體掩碼聚合視覺標記,再通過跨場景平均剔除顏色、形狀等身份屬性;處理後,中間層的 PCA 佈局與真實場景最吻合,相鄰物體的表徵能量比也更低。把 Dirichlet 能量加入微調目標,並在中間層做 500 步 LoRA 後,Qwen2.5-VL-7B 在 VSI-Bench 簡單相對方向任務上的準確率從 47.9% 升到 60.0%。

Hacker News front pageAI 評分70

UniEvo-VL:多模態模型自蒸餾自我進化訓練配方

arXiv 上提交的 UniEvo-VL 提出一種 on-policy 自蒸餾訓練方法:讓同一個多模態模型分別以學生和教師身份出現,學生只看原始問題,教師額外看到自我批評作為特權資訊,訓練目標是縮小兩者在取樣軌跡上去噪擴散分佈的差異,無需依賴更大的外部教師模型。基於開源 Qwen-image-2512,GenEval 從 0.747 升至 0.808,GenEval2 Soft-TIFA 從 32.97 升至 35.53。

NVIDIA blog● 精選AI 評分87

輝達開源 Nemotron 3.5 Super VL 與兩款 Bolt 邊緣模型

輝達發布 1200 億引數開源模型 Nemotron 3.5 Super VL,主打多模態 agentic 任務,官方稱其準確率接近自家最大推理模型、引數量約為五分之一,吞吐量最高達同類模型 5 倍。同時推出兩款邊緣模型:Bolt 74B-A9B 24GB 採用原生 2-bit 量化,可在 RTX/DGX Spark 的 24GB 記憶體內本地執行 agent,現已可用;Bolt E4B 4GB 面向 GeForce RTX、Jetson 等裝置,10 月 23 日發布。