西湖大學成立世界模型研究中心
西湖大學成立世界模型研究中心,研究方向為當下熱門的世界模型(world model)。據原標題,這一佈局始於三年前,相關方向今年受到廣泛關注。原文未披露中心負責人、團隊規模、經費與具體研究計劃。
依意思最接近的 30 筆
西湖大學成立世界模型研究中心,研究方向為當下熱門的世界模型(world model)。據原標題,這一佈局始於三年前,相關方向今年受到廣泛關注。原文未披露中心負責人、團隊規模、經費與具體研究計劃。
由普林斯頓大學、多倫多大學、NVIDIA 與智元等機構提出的世界模型評測平台 WorldOracle 於 10 月 16 日向開發者開放,以真實操作記錄檢驗模型對動作後果的預測。首批七種模型暴露兩類問題:機械臂路徑跟得準但物體位置偏差大,IRASim 機械臂得分 78.8、物體僅 29.1,Cosmos 3 為 89.4 與 45.4;
Google DeepMind 發布 Genie 4 世界模型,稱它在物理模擬與人物表現上比去年的 Genie 3 更真實,幾乎各方面都有提升。世界模型不需要預先渲染環境或程式設計互動元素,只要說明需求,它就能即時逐幀生成可探索的虛擬世界;DeepMind 將其視為通往 AGI 的關鍵,可用於機器人的訓練環境和創意領域的快速原型。部分改進來自 Google 更新的 Gemini 模型,DeepMind 還暗示付費後有望提前用上 Genie 4。
浙江大學、復旦大學、螞蟻集團與南京大學團隊推出 WorldMemBench,用可控的“離開—回訪”鏡頭評測影片世界模型的記憶。基準含 260 個案例、23 個內容類別,分靜態記憶、動態記憶及影片品質、相機跟隨四個維度,測試了 HY-WorldPlay、LingBot-World 等九個模型。結果顯示靜態與動態記憶的強項分化:HY-WorldPlay 七項靜態指標全部領先,LingBot-World 動態記憶總分最高;
10 月 20 日,千訣科技在南京首屆物理 AI 與世界模型大會上發布預測式世界模型 Polibrain,已在四足、人形、輪式、雙臂等機器人形態上開展適配。該模型不生成未來畫面,而是在潛在表徵空間預測真正影響任務的狀態變化,並串聯感知、決策、執行與反饋形成閉環。千訣稱其與清華團隊 2025 年在 ICML 發表的隱變數可辨識性研究,比 LeCun 團隊相近論文早約一年。公司不造機器人本體,以松耦合架構讓不同形態機器人共享對世界的理解。
牛津大學、莫納什大學與布里斯托大學等團隊提出互動式影片世界模型 Oneira,由 Coding Agent 維護的 World State Table 單獨記錄場景中每個物體的 3D BBox 與互動狀態,從而精確改變指定物體,並讓改變後的狀態在後續影片中持續保留。
崑崙萬維旗下 Skywork AI 發布並開源遊戲世界模型 Matrix-Game 4.0,稱其為全球首款可在單張消費級顯示卡上即時執行的遊戲世界模型。它在 RTX 5090 上以 60 FPS、480p 畫質執行,按鍵到畫面回應不到 0.15 秒,視訊記憶體峰值約 18.5GiB。做法是把世界狀態與遊戲規則交給遊戲引擎維護,影片模型只負責生成畫面,Coding Agent 可用自然語言改寫遊戲程式碼,例如把計時賽變成追擊戰。
兩位前 Palantir 高管創立 Dream,獲得 a16z 領投的 1700 萬美元種子輪,用於開發面向建築設計、工程的建築世界模型。該模型基於全美各地許可檔案中超過 1 億平方英尺的建築資料訓練,生成方案時會考慮管線、暖通與承重等結構要素,而非只畫出一張好看的效果圖。產品已在得州和加州 10 個在建專案中用於方案構思與成本估算,目標是替代 AutoCAD、Revit 等傳統 AEC 工具。
Northwestern、CMU 等團隊建置 WOVEN 資料集,把世界建模定義為對「狀態–動作–結果」三元組的推斷,並證明它可以獨立測量、獨立訓練,也能跨任務遷移。WOVEN 共 3.6 萬道題,測了 38 個前沿模型:最強的 GPT-5.4 準確率為 65.8%,人類為 92.3%,其中時序相鄰判斷停在 25%–28%,接近隨機。在 WOVEN 上做 SFT 與 RL 後訓練後,Qwen2.5-VL-3B 的域內準確率從 26.4% 升至 89.3%;
清華大學姚期智、袁洋團隊提出「代數世界模型」(AWM),讓 AI 把觀察到的現象寫成可執行假設、凝鍊為通用規則,最後用 Lean 4 形式化成機器可檢驗的數學證明。在 ARC-AGI-3 上,基於 Opus 5 的 AWM 通關全部 183 個關卡,得分 99.9%,平均通關步數只有人類基準的 43%;面對被人為改成無解的關卡,它嘗試兩次即證明「不可能」,並指出再增加一步就能獲勝。團隊同時說明,這些證明只在已觀測到的世界內成立,探索不全時得到的只是區域性真理。
以色列創業公司 42AI 結束隱身狀態,帶著 6,250 萬美元種子輪融資推出「行為世界模型」,用來預測人在全新情境下會做出什麼決策。它已在約 10 家大型券商上線,用於管理流動性、保證金要求與對沖敞口;公司稱其交易預測準確率達 98%(指交易流是否落在預測區間),預測交易方向與成交量的 F1 為 0.8 到 0.85。模型訓練資料覆蓋 200 多萬人與近 3,000 萬條客戶記錄,據稱不需要個人身份資訊,收入已達七位數,後續將探索遊戲、反欺詐與網路安全。
智元發布世界-動作模型 GE-Act 2.0,把「預測未來」與「生成動作」整合進同一模型,訓練資料從 300 小時擴充套件到 3 萬小時。在陌生場景、陌生物體上不做額外訓練直接測試,其中一款機器人總體成功率從 17.1% 提升至 44.1%,陌生場景成功率提升約 2.6 倍;在 RTX 5090 上生成一個連續動作塊約需 104 毫秒。
清華特獎得主、GeoPT 一作吳海旭已創立世界模型公司物原科技,從搭載物理建模能力的世界模型切入,迄今迅速完成多輪融資,估值達數億美元,投資方包括螞蟻、美團、達晨財智、星連。其技術思路一定程度延續 GeoPT 的研究路線,該工作提出合成動力學預訓練範式,把靜態幾何提升到動態空間,讓模型從粒子軌跡演化中獲取物理直覺,作者還包括龍明盛、何愷明與 Wojciech Matusik。吳海旭 2025 年起在 MIT CSAIL 做博士後,Google 學術被引 29611 次。
在 2026 世界頂尖科學家論壇國際工程智慧大會上,智象元一創始人梅濤提出建置智慧體化的全模態世界模型,認為大語言、多模態與具身大模型三條路線終將匯流。該架構由 LLM 決策大腦、Omni-Model 世界模擬器與具身上下文三部分組成,主張在同一 Token 空間內統一思維與物理世界。智象已基於自研 Unified Transformer 搭起從影像、影片到互動、具身模型的矩陣,並通過企業級平台 HiHarness 與三個智慧體推進商業化。
中科大系公司白澤通境發布溯因式世界模型 AWM,並開源論文與程式碼,配合自研端側推理引擎 BAIZ-RUN 把模型壓進機器人本地執行。AWM 從無標註影片學習,在 Push-T 任務上以 2000 條軌跡達到 75% 成功率,約為 Causal-JEPA 所需資料的七分之一,資料加到 14728 條時成功率約 92%。
Google 發布 Genie 4 世界模型,可生成約兩分鐘的可互動體驗,時長比上一代 Genie 3 的一分鐘翻倍。官方列出的四項更新包括:世界更真實、可用自然語言提示即時修改場景、支援生成音訊,以及底層改用 Gemini 3.8 Flash 輔助模擬。Google 稱其適用於影視預視覺化、遊戲創意原型和機器人訓練場景。
輝達為 Cosmos 世界模型平台新增四款開放權重模型,均為 Cosmos 3 Nano 的後訓練版本,含 16B 可訓練引數,採用 OpenMDW1.1 許可,允許商用與非商用。Transfer-Auto 可生成最多 11 路相機同步影片與聯合 RGB-LiDAR 資料,Sim-Auto 是其因果蒸餾的流式版本,用少量去噪步輸出連續片段以支援閉環互動;
Google DeepMind 發布世界模型 Genie 4 研究預覽版,首次加入與場景匹配的即時音訊(音樂、環境音、可互動對話),並支援在模擬過程中直接輸入提示即時修改場景,例如改天氣、換鏡頭角度、增刪人物。單次場景一致性最長約兩分鐘,為 Genie 3 的兩倍,物理表現與角色擬真度也有所提升。
拓元智慧開源原生 4D 世界動作模型 E0.5,在 AgileX Piper 雙臂與 Zerith H1 人形真機上整體平均成功率分別為 85.0% 和 88.3%,比π0.5 分別高出 13.3 和 26.7 個百分點。模型以三維基礎模型為骨幹,把未來幾何預測直接融入動作學習,並用超 16 萬條真實機器人軌跡做具身預訓練;H1 的分佈內成功率達 100%,分佈外為 76.7%(π0.5 僅 46.7%)。論文、專案主頁與開原始碼均已公開。
Google 發布新一代世界模型 Genie 4,原生多模態,在生成畫面的同時產出音樂、環境音與互動對話,並支援用自然語言即時修改天氣、鏡頭或加入人物物體。它建立在 Gemini 家族能力之上:Gemini Omni 讓模擬貼近真實世界的外觀與行為,其他 Gemini 模型負責維持場景的連貫與連續。
Meta 提出相機可控影片世界模型 World-T³,用測試時訓練把滑出上下文視窗的歷史觀測寫入快速權重,緩解長時生成中的失憶。在 120 段“去程+返程”基準上,重訪 PSNR 從 13.52 dB 升至 18.31 dB,絕對旋轉誤差從 3.344°降至 1.075°。經雙教師蒸餾的 4 步模型在單張 B200 上以 1280×704 解析度達到 20.6 FPS,生成中記憶持續更新,並在 6 項重訪一致性指標上均列第一。
啟元具身研究中心發布 PrimeSim,一款由預訓練影片生成模型改造而成的機器人世界模型模擬器,在 EWMBench 以 6.09 綜合得分登頂,並在 WorldSimProbe 五項指標中拿下三項第一。它用 30110 小時、覆蓋 22 種機器人平台的資料做中訓練與後訓練,單張 A100 上三視角推理達 10.12 FPS,支援兩分鐘以上連續推演。
百度 Apollo 披露世界模型 ApolloWorld,已用於蘿蔔快跑無人車的全球化測試與驗證,官方稱其一天生成的虛擬路測里程約等於一輛帶安全員的真實測試車連跑三年。虛擬城市中的車輛、行人被建模為可互動 AI 智慧體,會隨無人車的變道、減速改變決策,可支撐數十分鐘完整 Robotaxi 行程的即時推演。百度同時提出面向物理 AI 的 2+3 評價框架:因果性、互動性,以及物理準確性、永續性、即時性。
10 月 19 日,2026 物理 AI 與世界模型大會醫療健康世界模型分會在南京舉行,江蘇省人民醫院與南京可信資料服務有限公司聯合發布五項慢病世界模型,覆蓋胰島素抵抗、糖尿病用藥、高血壓、血脂與動脈粥樣硬化、慢性腎病風險。同場發布醫療健康世界模型一體機,融合國產算力、作業系統與資料庫,支援醫院本地化部署,並啟動高品質資料集聯合建設計劃。地中海貧血篩查世界模型則以原始資料不出域的方式在院內訓練驗證。
優必選 Thinker-WM 在 WorldOlympiad、EWMBench、WorldArena1.0 Track-1 三大具身世界模型基準中均位列第一,其中 WorldOlympiad 綜合得分 0.740,EWMBench 綜合總分 4.66,超過 Qwen-RobotWorld、Sora2 等模型。
優必選 Thinker-WM 在 WorldOlympiad、EWMBench、WorldArena Track-1 三項具身世界模型基準評測中均列第一,WorldOlympiad 綜合得分 0.740,EWMBench 總分 4.66,超過 Qwen-RobotWorld、Sora2 等模型。
Einsia AI 旗下 Navers Lab 發布 World Models' Last Exam in Physics,用 40 個任務、9 類物理現象測試 8 個影片生成模型,Seedance 2.5 以 57.76 分居首,MiniMax H3 以 54.89 分次之。評分由一致性分 C 與物理分 P 組成,物理分靠程式從影片中測量軌跡、週期、角度等量再按物理關係計算,且只有 C≥80 才計入總分。
11 月 3 日,百度 Apollo 首次對外披露具身世界模型 Apollo World,讓蘿蔔快跑的端到端駕駛系統在 AI 智慧體驅動的虛擬城市裡練車。官方稱其每日虛擬路測里程可達十萬公里,相當於一輛配安全員的真實路測車連續測試約三年。該模型把車輛、行人建模為具備感知與決策能力的智慧體,可調車流密度與激程序度、一鍵切換天氣與環境,並支援推演完整 Robotaxi 接單行程及多車並行測試。百度同時提出因果性、互動性兩項門檻與物理準確性、永續性、即時性三項增益的判斷標準。
無界動力發布並開源端側 7B 隱空間世界模型基座 MWA-Phoenix,在 LIBERO-Plus、LIBERO-Pro、RoboCasa GR1、Bench2Dex、RoboTwin 2.0 與 RoboDojo 真機榜六項評測同時登頂。模型僅以 RGB 輸入、不用深度真值也不依賴 Agent:LIBERO-Plus 成功率 94.63%,Bench2Dex 平均 45.6%,領先對照模型 π0.5 17.3 個百分點。
Google DeepMind 發布 Genie 4,稱其是目前最逼真、互動性最強的世界模型。據官方介紹,使用者可以即時探索動態環境,場景會對手的操作做出回應,並伴有聲音,場景中的人物會移動、反應和說話。推文未提及 Genie 4 的開放時間、訪問方式或適用範圍。