Show HN:在手機上搭建 3D 世界,再到 Vision Pro 與 Quest 的 XR 裡探索
Show HN 上出現一個名為 camilleworld 的專案:在手機上搭建 3D 世界,然後進入 Apple Vision Pro 與 Meta Quest 的 XR 環境中瀏覽。入口是 3d.camilleworld.com/play/,手機端負責搭建,頭顯端負責沉浸式檢視。原帖只給出連結,未說明支援機型、是否需要帳號或是否收費;發帖時僅 3 分、0 條評論。
依意思最接近的 30 筆
Show HN 上出現一個名為 camilleworld 的專案:在手機上搭建 3D 世界,然後進入 Apple Vision Pro 與 Meta Quest 的 XR 環境中瀏覽。入口是 3d.camilleworld.com/play/,手機端負責搭建,頭顯端負責沉浸式檢視。原帖只給出連結,未說明支援機型、是否需要帳號或是否收費;發帖時僅 3 分、0 條評論。
禾賽 10 月 14 日發布三維世界資料引擎 Kosmo,由空間相機 Kosmo One 與雲平台 Kosmo World 組成,約 15 分鐘可完成 100 平方米空間掃描並生成三維訓練環境,而人工建模還原一家門店約需 300 小時。禾賽稱 Sharpa 的失敗案例降至原來的十分之一,任務成功率達 99%,同一空間可自動生成上萬條訓練軌跡。
牛津大學、莫納什大學與布里斯托大學等團隊提出互動式影片世界模型 Oneira,由 Coding Agent 維護的 World State Table 單獨記錄場景中每個物體的 3D BBox 與互動狀態,從而精確改變指定物體,並讓改變後的狀態在後續影片中持續保留。
跨維智慧發布 UNITAS,稱其為首個機器人任務原生的 3D 世界模型,把觀測、動作與環境變化統一到同一三維物理空間,用點的位置與軌跡表示,引數僅 1.7B。它在 LIBERO 取得 99.8% 平均成功率、LIBERO-Plus 89.1%,RoboTwin 2.0 雙臂 Clean 與 Randomized 分別 92.94% 和 93.04%,超過 6B 的 Fast-WAM 與 8B 的 Motus,真實機器人任務平均成功率 85%。
上海人工智慧實驗室、武大、北航、北大、清華等機構聯合提出的 LabBuilder 被 ICML 2026 收錄,它能把一段自由文字實驗描述端到端生成幾何合規、化學安全且機器人可達的 3D 實驗室佈局。系統由資產與協議編譯器 LabForge、層次化生成框架 LabGen 和四維評估基準 LabTouchstone 組成,資產知識庫收錄 176 類實驗室實體。在 30 個化學實驗協議上,其協議級導航成功率 FSR-Nav 達 0.966,是唯一支援該驗證的方案。
北京大學團隊的 DragMesh 被 IJCV 接收。使用者只需在已有 3D 資產上對目標部件拖拽一次,系統就能生成符合關節約束的完整運動軌跡,無需重新生成整個物體。方法上先用 KPP-Net 預測關節型別、軸與原點,再由 Dual Quaternion VAE 並行生成 16 幀軌跡,並通過跨模態語義蒙皮把同一套運動遷移到 Mesh 或 3D Gaussian Splatting。
開發者用 Claude Code 製作了義大利 La Thuile 滑雪場的 3D 地圖,該雪場跨邊境連線法國 La Rosière。資料指令碼用 Python 從 OpenStreetMap 下載雪道與纜車資料、從 AWS Terrain Tiles 獲取高程,最終打包成單個 0.8 MB 的 HTML 檔案,可在手機或桌面瀏覽器中執行。
慕尼黑工業大學團隊提出 Tadpole,用自編碼器而非預測下一時刻作為預訓練目標,先學三維物理場的通用表示,再遷移到重建、動力學預測與生成。預訓練採用線上學習,GPU 上的求解器即時生成資料直接送入訓練,累計使用約 202 TB 資料卻無需本地儲存,在高速 SSD 環境下整體速度約為離線方案的 1.8 倍。模型用隨機裁剪區域性區域統一不同變數數與解析度的資料,零樣本重建最高到 1024³;
由普林斯頓大學、多倫多大學、NVIDIA 與智元等機構提出的世界模型評測平台 WorldOracle 於 10 月 16 日向開發者開放,以真實操作記錄檢驗模型對動作後果的預測。首批七種模型暴露兩類問題:機械臂路徑跟得準但物體位置偏差大,IRASim 機械臂得分 78.8、物體僅 29.1,Cosmos 3 為 89.4 與 45.4;
AI 3D 生成公司 Meshy 披露,其 ARR 從 100 萬美元增長至 1 億美元,用時不到兩年,比 HeyGen 的 29 個月更快。Meshy 7 在自建幾何對齊基準中造型比例、空間分佈、表面細節三項指標領先受測模型,7.1 將幾何生成解析度從 2048³ 提升至 4096³。三七互娛已將其接入生產流程,基礎模型階段雕刻工作量減少 30% 至 40%。
崑崙萬維旗下 Skywork AI 發布並開源遊戲世界模型 Matrix-Game 4.0,稱其為全球首款可在單張消費級顯示卡上即時執行的遊戲世界模型。它在 RTX 5090 上以 60 FPS、480p 畫質執行,按鍵到畫面回應不到 0.15 秒,視訊記憶體峰值約 18.5GiB。做法是把世界狀態與遊戲規則交給遊戲引擎維護,影片模型只負責生成畫面,Coding Agent 可用自然語言改寫遊戲程式碼,例如把計時賽變成追擊戰。
純 Rust 編寫的開源引數化 3D CAD SolidCraft 發布,內建 MCP 伺服器,可讓 AI agent 直接驅動建模,同時支援桌面端與瀏覽器執行。它提供草圖約束求解、拉伸/旋轉/掃掠/放樣、裝配、鈑金與引數化特徵時間線,修改尺寸後模型自動重建,並可匯出 STEP 與 IGES。已提供 Windows、macOS、Linux(AppImage、deb、rpm、Flatpak、Snap)及 ARM64 與網頁版下載,安裝包尚未簽名。
面向藝術家的開源創作工具 ArtCraft 上線,提供 macOS、Windows 與瀏覽器版本,全部程式碼在 GitHub 開源,無需訂閱。它把生成與合成放在同一畫布:Image to Location 可把虛擬角色放進實拍環境並保持單一地點一致性,Image to 3D Mesh、Character Posing、背景移除、2D/3D 合成與混合素材用於精確排布鏡頭,頁面還列出 Seedance 2.5、Nano Banana 2 等模型。
Anyworld 是一款瀏覽器端多人文字冒險遊戲,由房主用 llama.cpp 本地跑模型充當 DM,也支援 OpenAI 等雲 API,玩家只需開啟連結即可加入。行動結果由 Python 真實擲骰決定,模型只負責敘述;支援自訂劇本、隱藏劇情觸發、場外聊天和斷線重連。開發時用 Gemma 4-26B-A4B Q4、128k 上下文,在 RTX 5070 Ti 16GB 上每輪結算約 5 秒。
智元發布世界-動作模型 GE-Act 2.0,把「預測未來」與「生成動作」整合進同一模型,訓練資料從 300 小時擴充套件到 3 萬小時。在陌生場景、陌生物體上不做額外訓練直接測試,其中一款機器人總體成功率從 17.1% 提升至 44.1%,陌生場景成功率提升約 2.6 倍;在 RTX 5090 上生成一個連續動作塊約需 104 毫秒。
一位使用者用同一提示詞讓 Opus 5.5 和 Sol 6.1 在 15 分鐘內用 three.js 建置簡化版布萊德湖城堡,要求可環繞旋轉相機並保持寧靜氛圍。Opus 5.5 用時 5 分 46 秒,約 30 萬輸入加 1.8 萬輸出 token,估算 API 成本約 1.56 美元;Sol 6.1 用時 11 分 2 秒,約 40 萬輸入加 1.6 萬輸出 token,估算成本約 0.96 美元。
10 月 20 日,千訣科技在南京首屆物理 AI 與世界模型大會上發布預測式世界模型 Polibrain,已在四足、人形、輪式、雙臂等機器人形態上開展適配。該模型不生成未來畫面,而是在潛在表徵空間預測真正影響任務的狀態變化,並串聯感知、決策、執行與反饋形成閉環。千訣稱其與清華團隊 2025 年在 ICML 發表的隱變數可辨識性研究,比 LeCun 團隊相近論文早約一年。公司不造機器人本體,以松耦合架構讓不同形態機器人共享對世界的理解。
Blueprints AI 在 TechCrunch Disrupt 上發布第二代軟體:輸入專案描述或草圖,即可一次性生成建築、結構、機電、給排水與室內設計的全套藍圖,本週公開上線。二代支援直接修改設計,一處改動自動同步整個專案並對照當地建築規範校驗;一代僅輸出施工檔案,訂閱價每月 3200 至 8500 美元。模型基於該公司八年獲批圖紙訓練,出圖仍需持證建築師稽核蓋章,加入結構分析與配電盤設計的三代版本已在開發中。
浙江大學、復旦大學、螞蟻集團與南京大學團隊推出 WorldMemBench,用可控的“離開—回訪”鏡頭評測影片世界模型的記憶。基準含 260 個案例、23 個內容類別,分靜態記憶、動態記憶及影片品質、相機跟隨四個維度,測試了 HY-WorldPlay、LingBot-World 等九個模型。結果顯示靜態與動態記憶的強項分化:HY-WorldPlay 七項靜態指標全部領先,LingBot-World 動態記憶總分最高;
開發者用 Claude 迭代的 3D 畫素風遊戲 Willowmere 發布第二版,全部畫面由程式碼生成,不使用任何素材檔案,基於原生 HTML 和 JS,未用遊戲引擎。新版加入完整劇情(三幕加真結局)、低潮採集、制燈、月光釣魚、守望燈塔等玩法,以及鯨骨海灣場景、全套美術動畫和帶表情的 3D 渲染頭像,並修復了此前使用者反饋的問題。本次迭代主要使用 Opus 5.5、中等投入,可在瀏覽器免費試玩。
中科大系公司白澤通境發布溯因式世界模型 AWM,並開源論文與程式碼,配合自研端側推理引擎 BAIZ-RUN 把模型壓進機器人本地執行。AWM 從無標註影片學習,在 Push-T 任務上以 2000 條軌跡達到 75% 成功率,約為 Causal-JEPA 所需資料的七分之一,資料加到 14728 條時成功率約 92%。
NVIDIA 推出 Cosmos3-H-Dreams,據其稱為首個基於臨床膽囊切除手術錄影訓練、可即時回應操作指令的生成式手術模擬器。模型基於 160 億引數的 Cosmos3-H-Embodied-Nano,接收 28 維動作(雙臂位姿、夾爪、能量控制與搖桿),以 832×480、10 Hz 的錄影與運動學資料訓練,並蒸餾出四步與兩步兩個學生檢查點,後者推理更快但畫質略降。
開發者 chasm 用 Claude 等 AI 工具,把 Skate 3 的物理、招式圖和骨骼重定向塞進 2009 年的《使命召喚:現代戰爭 2》,原本需數年的逆向工程被壓縮到約一週。
優必選 Thinker-WM 在 WorldOlympiad、EWMBench、WorldArena1.0 Track-1 三大具身世界模型基準中均位列第一,其中 WorldOlympiad 綜合得分 0.740,EWMBench 綜合總分 4.66,超過 Qwen-RobotWorld、Sora2 等模型。
輝達公布多個案例,展示開發者用 GPT-6 Astra 等前沿模型配合 Omniverse 庫,靠自然語言指令建置模擬應用。其中倉庫模擬在 80 臺傳送帶、40 個機械臂和 800 個箱子的規模下,以全高畫質 30 幀每秒持續執行兩分鐘,機械臂完成 640 次抓放;規模再翻倍後定位到物理與機器人控制管線的瓶頸。其餘案例涵蓋柔性電纜佈線的強化學習、CAD 轉 SimReady 資產、人形機器人第一與第三人稱模擬,以及基於舊金山 Market Street 的自動駕駛測試流程。
被 NeurIPS 2026 接收的 TerraVis 提出文生圖「世界一致性」評估框架,用物體、互動、場景三層共 18 類檢查衡量影像在結構、空間、物理與常識上是否合理,只輸入影像、不依賴提示詞。在 COCO-T2I 與 GenAI-Bench 上,它與人類評分的 Spearman 相關係數為 0.44 和 0.43,高於現有指標中最好的 RAHF(0.29 和 0.37);
NVIDIA 擴充套件 Cosmos 世界模型平台,推出 Cosmos 3 及配套訓練、最佳化與部署工具,並開放 Cosmos Data Factory 的五項雲端藍圖。這些藍圖涵蓋自動駕駛資料集生成、缺陷影像生成等場景,可在 GitHub、Azure、Nebius、CoreWeave 上使用;Cosmos Framework 支援對 GR00T、QWEN、Pi0.5 等開源模型做微調、強化學習與量化蒸餾。新版 Cosmos 3 NIM 微服務推理最高快 2 倍;
開發者發布開源樂高 AI 生成器,通過 Python 工具集、指令和文件讓 AI 代理直接生成 LDraw 格式的樂高 CAD 模型。該專案用 GPT-6 Astra 和 Opus 5.5 迭代數月完成,已打包為 Docker 化 Web 應用,支援 OpenAI、Claude 和 OpenRouter 三種提供商。生成的 .mpd 或 .ldr 檔案可在 LDView、LeoCAD、Studio 等工具中開啟和修改。
有人僅用 Claude iPhone 應用的預設聊天模式(非 Claude Code),讓 Claude Opus 5.5 Max 製作 three.js 遊戲「Tree Appreciator」:展示兩棵演算法生成的樹,玩法是比較並欣賞兩者的差異。Claude 連續執行 3 小時 7 分鐘後,返回了一個帶音樂、動畫與成就係統的找不同小遊戲。作者表示,只提示「確保它好玩」效果出奇地好。
Mistral 與 NVIDIA 宣布合作開發 AI 原生工程工作流:以 Mistral Large 4 配合資料生成與物理建模管線,用 NVIDIA CUDA-X、Warp 加速模擬,並接入 Omniverse 生成 3D 場景與 SimReady 資產。雙方還將發布物理模型的公開基準與開放資料集,併為 CAE、EDA 中的 agentic AI 建立評測,考察工具使用、多步流程與技術正確性,同時記錄耗時與算力成本。