Google Cloud 開源 AQuA,為生產環境 agent 做品質診斷
Google Cloud 開源參考實現 AQuA(Ambient Quality Agent),用於持續診斷已在生產環境執行的 AI agent 的品質問題。它與生產 agent 並排執行,掃描失敗聚類並對照對話記錄逐條驗證,再把根因定位到當時實際部署的原始碼快照。它針對的場景是:agent 做到 80% 之後難以繼續改進,且靜默的品質回退仍然返回 HTTP 200 OK。
把靜默品質回退與具體部署的原始碼快照關聯起來,並給出失敗聚類掃描與驗證的參考實現,對在生產環境運維 agent、需要定位品質回退根因的團隊有直接參考價值。
原標題:The Outer Loop, Insights First: An Ambient Quality Agent That Diagnoses Your Production Agent
閱讀原文
| 評分 | 62 / 58(平均 60,門檻 65) |
|---|---|
| 狀態 | 未入選 |
相關報導
研究者發現一支中國 AI agent fleet,疑執行於騰訊、呼叫高德地圖
獨立研究者 10 月 5 日發布初步發現,追蹤到一批並行的 AI agent,疑似執行在騰訊的基礎設施上,目標指向阿里巴巴的高德地圖服務,查詢內容為公園、動物園、醫院等公共場所不同入口的路線。研究者拒絕使用 swarm 一詞,稱應叫 agent fleet:多個 agent 執行同類任務,彼此之間沒有通訊跡象。這些活動是通過監控域名掃描服務 URLquery 的流量發現的,該服務常被 agent 用來載入無法直接訪問的網站並留下記錄;研究仍在進行中。
學者提出 Ephemeral Testing:用 AI 臨時搭建上層應用檢驗程式碼
魁北克大學電腦科學教授 Daniel Lemire 提出 ephemeral testing(臨時測試):不直接評估自己寫的程式碼,而是讓 AI agent 在其之上臨時搭建一層或多層應用並測試,用完即棄,再根據失敗情況反推底層程式碼品質。它屬於整合測試,區別在於上層軟體完全是一次性的;API 清晰、不變數穩定、報錯有用的庫能讓 agent 快速產出可執行的東西,隱藏狀態、意外預設值或文件不全的庫則會產出一堆補丁和失敗,這些失敗是底層程式碼的證據而非 agent 的問題。
Google 為 Gemini 推出統一 agent,先向企業開放
Google Cloud 發布 Gemini 統一 agent,可接受目標而非指令,自主規劃任務並連線企業內部系統,目前先面向企業客戶,之後再推向消費者。該 agent 預設自動挑選模型,也允許手動指定第三方模型,首批接入 Anthropic 的 Claude,未來將擴充套件至開源與私有模型。它擁有獨立的 Workspace 帳號和信箱,操作會留下歸屬 agent 的審計記錄,入口覆蓋 iOS、Android、Windows、Mac、命令列、Slack 等。
微軟與 Hugging Face 發布 ThinkingBox,按資料庫狀態給 AI agent 打分
微軟聯合 Hugging Face 推出 ThinkingBox 基準,通過 Hugging Face 提供,不看 agent 的回覆文字和工具呼叫,只檢查它留在後端資料庫裡的最終狀態與副作用,每個任務重複跑 20 次。在 507 個有狀態業務流程、12 個模型、121,680 次有效試驗中,79,853 次未通過可執行檢查,其中 67.24% 仍乾淨收尾且無工具報錯。
Anthropic 發布 agent 自動化參考實現,附 Claude Code 配置命令
Anthropic 發布基於 Claude Managed Agents(beta)的 agent 自動化參考實現:按 cron 計劃讀取 Slack 頻道與 GitHub PR,依據上次執行留下的書籤只取新增內容,再把簡報發到指定 Slack 頻道。配套程式碼含 agent、部署、環境、記憶與 vault 等配置,用 ant apply 寫入 Claude API 工作區,憑據存於 vault、沙箱內只留佔位符;