輝達與 MIT 開源基於 MiniMax H3 的 4K 影片重生成方案
輝達與麻省理工學院團隊在 Hugging Face 放出影片增強專案 Open-H3-Regenerate-2K 的模型權重,配套推理程式碼開在 NVlabs/Sana 倉庫,可自行部署把低解析度影片草稿重生成到 2K、最高 4K。方案基於 MiniMax H3 基礎模型,凍結 Transformer 主幹與影片 VAE,只訓練細化 LoRA,推理時經三步去噪補充畫面細節。
依意思最接近的 30 筆
輝達與麻省理工學院團隊在 Hugging Face 放出影片增強專案 Open-H3-Regenerate-2K 的模型權重,配套推理程式碼開在 NVlabs/Sana 倉庫,可自行部署把低解析度影片草稿重生成到 2K、最高 4K。方案基於 MiniMax H3 基礎模型,凍結 Transformer 主幹與影片 VAE,只訓練細化 LoRA,推理時經三步去噪補充畫面細節。
Kling 4.0 於 10 月 15 日晚正式上線,原生影片生成時長提升至 30 秒。新增的全能參考支援圖片、影片與角色主體組合輸入,一次任務最多 15 項參考素材(圖片 10 張、影片 5 段且總時長不超過 30 秒,最多 7 個主體),也能針對特定元素區域性改片。同時推出主打速度與成本的 Kling 4.0 Flash,單次生成 3—20 秒;
Google 發布 Genie 4 世界模型,可生成約兩分鐘的可互動體驗,時長比上一代 Genie 3 的一分鐘翻倍。官方列出的四項更新包括:世界更真實、可用自然語言提示即時修改場景、支援生成音訊,以及底層改用 Gemini 3.8 Flash 輔助模擬。Google 稱其適用於影視預視覺化、遊戲創意原型和機器人訓練場景。
Google DeepMind 公布 Genie 4 世界模型,基於 Gemini Omni 建置,可生成照片級真實、帶原生音訊的可互動場景。新版本加入空氣動力學、碰撞等物理模擬與更自然的人物動作,並支援用提示詞即時改變場景、新增元素或與角色互動;Gemini 的推理能力讓多步事件在場景演進中保持連貫。
香港科技大學、香港城市大學、復旦、CMU、NYU、NTU 等機構聯合發布 110 頁綜述《The Past Frames the Future: Memory for Autoregressive Video Generation》,系統梳理自迴歸影片生成中的 Memory 機制。
崑崙萬維旗下 Skywork AI 發布並開源遊戲世界模型 Matrix-Game 4.0,稱其為全球首款可在單張消費級顯示卡上即時執行的遊戲世界模型。它在 RTX 5090 上以 60 FPS、480p 畫質執行,按鍵到畫面回應不到 0.15 秒,視訊記憶體峰值約 18.5GiB。做法是把世界狀態與遊戲規則交給遊戲引擎維護,影片模型只負責生成畫面,Coding Agent 可用自然語言改寫遊戲程式碼,例如把計時賽變成追擊戰。
小紅書首次以世界盃官方持權轉播商身份完成 2026 美加墨世界盃轉播,4K 增強回放轉碼提速近 60 倍,直播消費位元速率提升約 50%、端到端延遲降低約 30%。世界盃觀播量超過小紅書日常直播流量的 50 倍、互動量超 100 倍,直播客戶端團隊僅用三週交付數十個需求並支撐千萬級併發。回放在主觀畫質持平的前提下,4K 增強檔位元速率再降 13.3%,覆蓋 iOS、Android、鴻蒙、Web 與投屏。
開發者 roofkid 發布 Ninfer 4080,在 RTX 4080 16GB 上以 100k 上下文執行 ISTA-DASLab-Qwen-3.8-27B-GSQ,實測最高 prefill 2720 tok/s、生成 262 tok/s。專案採用 DFlash2 推測解碼與 KV 壓縮,程式碼已在 GitHub 開源並提供 Docker 映象。
崑崙萬維發布並開源 Matrix-Game 4.0,稱其為全球首個可在消費級顯示卡上即時執行的影片大模型遊戲。基於 Wan2.2 5B 改造,單張 RTX 5090 上以 480p 實現 60 FPS 遊戲執行,按鍵到畫面端到端延遲低於 150ms,1 步去噪穩態生成 83 FPS,視訊記憶體峰值約 18.5 GiB。作為對比,輝達同期 StreamRender-H3 需 8 張 GB200,互動延遲約 500ms。開源內容包括模型權重和可由開發者直接修改、擴充套件的遊戲程式碼。
Google DeepMind 發布 Genie 4 世界模型,稱它在物理模擬與人物表現上比去年的 Genie 3 更真實,幾乎各方面都有提升。世界模型不需要預先渲染環境或程式設計互動元素,只要說明需求,它就能即時逐幀生成可探索的虛擬世界;DeepMind 將其視為通往 AGI 的關鍵,可用於機器人的訓練環境和創意領域的快速原型。部分改進來自 Google 更新的 Gemini 模型,DeepMind 還暗示付費後有望提前用上 Genie 4。
Meta 提出相機可控影片世界模型 World-T³,用測試時訓練把滑出上下文視窗的歷史觀測寫入快速權重,緩解長時生成中的失憶。在 120 段“去程+返程”基準上,重訪 PSNR 從 13.52 dB 升至 18.31 dB,絕對旋轉誤差從 3.344°降至 1.075°。經雙教師蒸餾的 4 步模型在單張 B200 上以 1280×704 解析度達到 20.6 FPS,生成中記憶持續更新,並在 6 項重訪一致性指標上均列第一。
Google DeepMind 發布世界模型 Genie 4 研究預覽版,首次加入與場景匹配的即時音訊(音樂、環境音、可互動對話),並支援在模擬過程中直接輸入提示即時修改場景,例如改天氣、換鏡頭角度、增刪人物。單次場景一致性最長約兩分鐘,為 Genie 3 的兩倍,物理表現與角色擬真度也有所提升。
Google DeepMind 發布世界模型 Genie 4,支援用鍵盤操控角色與鏡頭,並用自然語言即時改變天氣、新增物體,是該系列首個原生生成即時音訊的版本。Gemini 深度參與模擬:Gemini Omni 提供真實世界視覺與行為知識,Gemini 3.8 Flash 負責拆解任務、逐步檢查並調整計劃,Google 稱這一方向為混合世界模型。
崑崙萬維 10 月 15 日發布 Matrix-Game 4.0,稱其為全球首個執行在單張消費級顯示卡上的影片大模型遊戲:一張 RTX 5090 即可在 480p 下以 60 FPS 即時執行,按鍵到首幀延遲低於 150 毫秒,視訊記憶體峰值 18.5 GiB。它由遊戲引擎維護世界狀態與互動規則、影片模型負責即時渲染畫面,首次跑通程式碼生成遊戲邏輯到即時渲染的閉環,並同步開原始碼、權重與白模,技術報告已發布。
生數科技開放 Vidu Q4 預覽版,720P 圖生影片起步價 0.09 元/秒,實測用 5.4 元做出一分鐘 GTA 6 風格的《邪惡老奶》短片。該版本最高支援 4K 直出,單條最長 16 秒,支援 FPV 視角,一次最多可用 15 張參考圖和 3 段參考音訊,官方稱強化了表情情緒、運鏡與特效對環境的真實影響。價格與規格掛鉤:MaaS 端 720P 約 0.6 元/秒、1080P 約 0.75 元/秒,SaaS 端預覽版提供兩個月限時優惠,部分使用成本可降至每秒幾分錢。
Google 發布新一代世界模型 Genie 4,原生多模態,在生成畫面的同時產出音樂、環境音與互動對話,並支援用自然語言即時修改天氣、鏡頭或加入人物物體。它建立在 Gemini 家族能力之上:Gemini Omni 讓模擬貼近真實世界的外觀與行為,其他 Gemini 模型負責維持場景的連貫與連續。
千里科技推出內建 10 TOPS NPU 的 AI 4D 毫米波雷達,把從天線與波形設計到點雲檢測、測角、增強和目標跟蹤分類的鏈路交給資料驅動模型,並支援邊緣側、衛星架構及兩者並行的相容模式。相比上一代 DSP 方案,其點雲密度提升 10 倍、探測距離提升 40%、鬼影消除提升至 95%、空間角分辨力提升 12 倍,還可通過 OTA 升級感知能力。該雷達對靜止兒童的穩定探測距離為 100 至 150 米。
NVIDIA 在 GeForce NOW 上開放 DLSS 4.5 控制選項,會員即使沒有最新硬體,也能調節支援遊戲的畫質與效能:DLSS 超解析度提升清晰度,動態多幀生成降低延遲與卡頓,光線重建增強光追畫面。該設定已在 Windows、macOS、Chrome OS 與 Steam OS 版應用的設定中上線,使用 RTX 5080 雲主機的 Ultimate 會員可用最多 4X 動態多幀生成等全部選項。
生數科技推出影片模型 Vidu Q4 Preview,是其面向創作者的首個預覽版本,首發價格 0.09 元/秒起,同樣預算最高可生成 5 倍內容。該版本主打人物演繹、鏡頭語言與複雜視效,支援最多 15 張參考圖、3 段參考音訊輸入,以及 2K、4K 畫質輸出。官方資料顯示其圖生影片速度約為同類模型的 2 倍,5 秒影片最快約 110 秒完成,正式版上線時間尚未公布。
Mistral 與 NVIDIA 宣布合作開發 AI 原生工程工作流:以 Mistral Large 4 配合資料生成與物理建模管線,用 NVIDIA CUDA-X、Warp 加速模擬,並接入 Omniverse 生成 3D 場景與 SimReady 資產。雙方還將發布物理模型的公開基準與開放資料集,併為 CAE、EDA 中的 agentic AI 建立評測,考察工具使用、多步流程與技術正確性,同時記錄耗時與算力成本。
AI 現在能在數天內自動反編譯遊戲,把編譯後的成品還原成原始碼再重新編譯到其他平台,產出支援高幀率、動態解析度與模組的原生版本。作者舉例 IsaacRecomp 將 2011 年 Flash 版《以撒的結合》自動移植為 C++,從鎖定 30FPS、低解析度變為原生 1440p、插值到 165FPS,同類專案已有數百個,涵蓋《科林麥克雷拉力賽 2.0》《最終幻想戰略版 Advance》《銀河戰士 Prime》,開發中的 AnyPS5 號稱可把任意 PS5 遊戲移植到 PC。
蘋果發布新一代 Apple TV 4K,核心是搭載由下一代 Apple Intelligence 驅動的新版 Siri——Siri AI,提供全屏對話式搜尋與觀看中追問,機身內建三顆遠場麥克風,可完全免手控喚醒。硬體升級到 A19 晶片,CPU 效能最高提升 50%、GPU 最高提升 2 倍,並新增專用 AV1 解碼器;Siri Remote 首次支援 Find My 精確查詢與發聲定位。
瑞典電視臺 TV4 將節目 The Challenge 推遲到 2027 年,起因是一次技術故障中 AI agent 抹掉了已剪輯好的素材。據 Sweden Herald 報導,素材丟失直接導致節目無法按原計劃播出。原文未披露涉事 AI 工具、素材能否恢復以及具體損失範圍。
VAST 將世界模型專案 Project Eden 的即時生成式渲染器 EdenLive 全面開源,涵蓋不同尺寸模型權重、推理程式碼與技術報告。該模型以簡化 Proxy 或參考影片為控制訊號,結合目標首幀與文字提示詞持續生成寫實或風格化畫面,5B 引數在單張 RTX 5090 上以 720P 輸出超過 24 FPS,端到端延遲約百毫秒,可連續生成到分鐘級。
llama.cpp 建置 b11558 修復了 OpenCL 後端處理 Q4_K 量化權重時的映象大小限制:當權重映象超出裝置限制時改為回退,而不是直接失敗。同一批提交還修正了 q4_0 的廣播邏輯,並避免 rms_norm 中出現不完整的子組計算,提交者來自高通(qti.qualcomm.com)。
DeepSeek 發布 DeepSeek-V4.1-Flash-1017,該模型通過帶自我反饋的強化學習提升端到端專案開發能力,覆蓋從遊戲製作到 3D 建模的完整流程。官方以演示形式展示實際效果,未在帖文中給出引數規模、上下文長度或 API 價格等資訊。
北京大學王選計算機研究所與 VGI Labs、UC Merced 聯合提出 DynStream,這是首個面向無位姿流式動態場景的大規模 4D 高斯前饋重建框架:輸入未提供相機位姿的 RGB 線上影片流,即可前饋輸出相機軌跡與持續更新的動態場景表示。方法按時間分塊做區域性重建,再借相對位姿預測與尺度因子把各塊聚合進統一世界座標系,併為高斯預測動態機率以分離動靜,聚合無需額外計算。
Anthropic 前沿紅隊發布研究,測試 AI 能否像計算機病毒一樣在不同裝置間自主複製傳播。實驗中 15 臺約 55 美元、4GB 記憶體的安卓電視盒子以流水線並行跑起 Gemma4-26B-A4B,總價約 825 美元,生成速度僅每秒 0.39 個 Token。GLM-5.2 在 8 節點模擬網路中 5 次有 4 次傳播到全部節點,但依賴外部推理伺服器與預開的免認證 ADB 埠;
Jev 發布 33 天后熱度迅速消退,這篇評論借它批評 AI 行業靠營銷話術製造期待。文章指出 Jev 本質是通用分類器,宣稱不會幻覺、更快更便宜,但輸出仍會出錯,且已有開放權重模型在部分任務上價效比更高,並可在本地執行。作者還稱其非自迴歸決策模型思路早於 Jev 一年半出現,並由此質疑行業四年來的創新增量。
一位使用者僅向 Opus 5.5 提供創意、工作資料夾和音樂檔案,模型便自主完成了從調研到成片的全流程。它檢索了四年 AI 發展資料與素材,擷取文章和介面截圖,編寫 HTML 與動畫程式碼,用 Playwright 渲染畫面、FFmpeg 合成並加入音效,最終輸出完整影片。