Context Engineering 演講梳理四類上下文失效模式
作者在 AGNTCon 的演講中梳理上下文工程現狀,並總結四類上下文失效模式。演講回顧從 RAG 到百萬 token 長上下文的發展,指出長上下文並非萬能,會出現上下文汙染、分心、混淆與衝突。文中以 Gemini 2.5 玩《寶可夢》為例:FireRed 攻略中的“給守衛茶”進入上下文後,模型在舊版遊戲中耗時數小時找茶,說明錯誤資訊一旦寫入便難以擺脫。核心是判斷何時該確定性、何時該機率性處理。
依意思最接近的 17 筆
作者在 AGNTCon 的演講中梳理上下文工程現狀,並總結四類上下文失效模式。演講回顧從 RAG 到百萬 token 長上下文的發展,指出長上下文並非萬能,會出現上下文汙染、分心、混淆與衝突。文中以 Gemini 2.5 玩《寶可夢》為例:FireRed 攻略中的“給守衛茶”進入上下文後,模型在舊版遊戲中耗時數小時找茶,說明錯誤資訊一旦寫入便難以擺脫。核心是判斷何時該確定性、何時該機率性處理。
AAAI 期刊論文《How to make System 1 LLMs show System 2 competencies?》在 Wiley Online Library 上線,研究如何讓直覺式(System 1)大模型表現出慢思考(System 2)的能力。全文需經 Wiley 連結檢視,Hacker News 同期討論帖僅 7 分、1 條評論。原文未披露所用方法、模型與實驗資料。
復旦 NLP 團隊發布主動式個人助手 A5,能在多次會話間積累對使用者與專案的理解,並在接入資料發生變化時主動提出後續建議。A5 Harness 通過 Context 索引、Memory 系統、Diff Engine 與 Proposal Engine 維護終身上下文:演示中它能把使用者對陶瓷的興趣遷移到新的旅行規劃,也能在需求文件從個人使用改為團隊共用時調整存取權限方案。技術預覽 v0.3.1 安裝包已開放下載,支援 macOS 與 Linux,程式碼將隨後開源。
JetBrains AI 團隊發文介紹其語義程式碼搜尋平台 Air Context 的 RAG 流水線,已投入生產環境。首篇聚焦解析、分塊與向量化:固定行數分塊會把 import 與函式體等無關程式碼混在一起,導致檢索錯誤,因此需按原始碼結構(如 Java 的 import、類定義、欄位與方法)劃分語義完整的塊。
OpenAI CEO Sam Altman 在 2026 年 10 月 1 日發帖表示,使用者應當能夠在任何需要的地方使用自己的 AI 訂閱。該表態未說明具體產品、實施方式或時間表,也未提及是否涉及跨平台或第三方應用。
llama.cpp 發布 b11887,主要變更是調整 test-llama-context 的預設執行緒數(PR #31157)。同版本仍按慣例給出各平台預編譯產物:macOS Apple Silicon(arm64)、macOS Intel、Linux(CUDA 12、CUDA 13、ROCm 10.0、Vulkan、SYCL、OpenVINO)、Windows x64 與 arm64、Android arm64,以及 openEuler 昇騰 910b 的 ACL Gra…
Apertus 1.5 發布,在 8B 與 70B 兩個尺寸上新增影像與音訊理解、可選思考模式,上下文視窗擴至 262,144 token,為 1.0 的 4 倍。權重已於 2026 年 7 月 24 日以 Apache 2.0 許可上傳 Hugging Face,技術報告同步公開。模型由第一代繼續預訓練而來,8B 增加 4 萬億 token、70B 增加 2 萬億,總量分別達 19T 與 17T。
Contexte Tech 將自己的資料目錄以 MCP 伺服器形式開放,無需帳號或金鑰,並把 MCP 視為智慧去中心化搜尋的共同底座。MCP 由 Anthropic 在 2024 年 11 月推出,2025 年 12 月移交給 Linux 基金會下的 Agentic AI Foundation,按帶日期的版本迭代並有公開伺服器登錄檔。與傳統搜尋引擎把網頁抓進自家索引相反,MCP 讓發布方把資料留在本地、由助手在提問時按需查詢,答案附帶來源、許可、作者和更新時間;
小紅書 Dots 團隊開源稀疏注意力加速方案 DoSA,在保持原始 Top-K 選擇結果完全等價的前提下加速索引器,約 1M token 上下文下 Dots3-Note-preview、GLM-5.2、DeepSeek-V3.2 的首 token 延遲較各自 SGLang 基線分別降低約 37%、46% 和 48%。其做法是用分數上界與入選門檻下界,提前排除約 97% 不可能入選的候選,只對剩餘候選做全部索引頭的精確打分。
llama.cpp 發布 b11860 版本,唯一的程式碼變更是修復 test-llama-context 在大 n_batch 下的失敗(#31083)。該版本同時提供各平台預編譯包:macOS 有 Apple Silicon(其中 KleidiAI 版被停用)與 Intel 版,另有 iOS XCFramework;
據 The Information 報導,Anthropic 正準備推出一款新模型,其推理與直覺判斷據稱超過現役所有商用 Claude 模型,並能從有限指令推斷出使用者未明說的目標。試用者舉例稱,讓它修復一個 Bug,它可能找出導致該 Bug 的一整類底層問題,並主動詢問是否一併修復;該模型的名稱、發布時間與評測成績均未公布。
科大訊飛發布端雲一體星火 X2.6,上下文視窗擴至百萬 Tokens,並同步開源星火 X2.6-4B 端側模型;其端雲路由協同訓練機制把路由準確率從 81.2% 提升到 96.1%。同場首發的還有星辰 TaaS 平台、企業級智慧體協同平台 Agent OS,以及基於全國產算力訓練的語音基座模型 SparkAudio 1.0,實測效果提升 20%、回應時延降低 15%、呼叫成本下降 60%。
OpenAI 開發者帳號宣布,Annotations 與 WebMCP 配對使用,可為 agent 提供更多可供行動的上下文。官方舉例來自開發者 @kagigz:他用自訂註釋控制元件與建議提示詞,讓使用者在 ChatGPT 的瀏覽器中編輯場景、更新支出。原文未披露 WebMCP 的適用範圍、可用時間或接入方式。
Anthropic 在 IPO 前向 SEC 提交 S-1 招股書,其中 93 頁、逾 7 萬字的「風險因素」章節列出數百項潛在風險,包括 AI 可能敲詐人類、獲得自我意識乃至終結人類。這些風險還涵蓋競爭、成本、獲客與監管等常規項,媒體從中挑出七項最出人意料的要點,供潛在投資者參考。
Ai2 發布 Old Ideas, Novel Problems 研究與配套基準,結論是用 LLM 當新穎性評審並不可靠:只改 prompt 裡幾處措辭,模型分辨兩個想法哪個更新的準確率就變動超過 50 個百分點。測試涵蓋 GPT-5.1、GPT-5.2、GPT-5.4 與 Claude Sonnet 4.5、Opus 4.5/4.6,檢索與額外推理都不能穩定改善判斷,兩個專門建置的新穎性評估系統還不如直接用 prompt 呼叫的 Claude Opus 4.6 基線。
OpenAI 公布應對歐盟 AI 法案的文字溯源方案:全球 API 客戶即日起可為部分模型選擇開啟文字水印(預設關閉),未來幾週將在歐盟的 ChatGPT 與 Codex 文字輸出中加入不可見水印,檢測器僅向獲批研究者與專家組織開放申請。其自研 textGrain 通過統計訊號標記用詞,在 1% 誤報率下對 200 token 段落檢出約 80%、400 token 約 95%,數學等用詞受限內容明顯更低;
Google DeepMind 宣布 SynthID Detector 現已向所有人開放,可用來判斷網上內容是否由 AI 生成。該工具除 Google AI 外,還支援檢測 OpenAI、NVIDIA、Kakao 等行業夥伴工具生成的內容,Apple 即將加入。使用者可通過 synthid.com 試用。