Uber CISO 主張為 AI agent 建內部威脅計劃,並已開源 ADR 監控工具
Uber 首席資訊安全官 Philip Martin 提出,企業應為 AI agent 建立類似員工內部威脅計劃的監控機制。Uber 已開源 AI Detection and Response(ADR),用於採集 agent 執行時的即時遙測並在越界時即時干預,同時把 Anthropic 的 Enterprise Frontier Safeguards 作為資料來源接入其整體檢測體系。
依意思最接近的 6 筆
Uber 首席資訊安全官 Philip Martin 提出,企業應為 AI agent 建立類似員工內部威脅計劃的監控機制。Uber 已開源 AI Detection and Response(ADR),用於採集 agent 執行時的即時遙測並在越界時即時干預,同時把 Anthropic 的 Enterprise Frontier Safeguards 作為資料來源接入其整體檢測體系。
Pluto Security 結束隱身狀態,宣布獲得 4200 萬美元融資,含 Jump Capital 領投的 3400 萬美元 A 輪與 TLV Partners 領投的 850 萬美元種子輪。其平台監控員工使用的 AI 工具、agent、MCP 伺服器與擴充套件元件,並可在 agent 執行中攔截越權操作或注入指令要求確認。CEO 稱新 AI 工具發布兩小時內就會出現在企業環境裡,客戶中約 60% 的風險來自非開發者 vibe coding 出的應用,財務部門最多;
羅格斯大學、得州大學奧斯汀分校與普渡大學團隊提出線上審計模型 AgentForesight,用 7B 模型在任務執行中逐步讀取軌跡字首,在關鍵錯誤擴散成失敗前報警。在 AFTraj-2K 測試集上,其關鍵錯誤步驟識別 Exact-F1 達 66.44,比最強通用基線 DeepSeek-V4-Pro 高 19.88 分,成功軌跡誤報率僅 2.37%。
Block 正藉助 OpenAI 技術建置 AI 安全能力,其安全團隊可以更快地調查威脅,並在幾分鐘內提出補丁。該訊息於 2026 年 10 月 14 日發布,公開內容只提到威脅調查與補丁提報兩個環節,未披露所用具體模型、部署規模與成本細節。
Anthropic 上線 OSS Scanner,為選擇加入的開源專案提供「由我們最強的模型」執行的免費、定期安全掃描。該掃描結果完全由模型生成,不經過人工稽核或分診,好處是掃描更快更頻繁、能更早提示潛在漏洞,代價是報告可能出錯或無效。服務需專案主動選擇加入(opt-in)。
OpenAI CEO Sam Altman 在 2026 年 10 月 3 日發帖表示,人們對 AI 模型賦予宗教式力量或放棄人類判斷力的做法令他非常不安,並認為這是一個真實的安全問題。該表態未點名具體模型或產品,也未給出應對措施。