OpenAI 與 Anthropic 被曝私下推演 AI 災難應對方案
Axios 獨家報導稱,Anthropic、OpenAI 等 AI 公司高管正私下推演 AI 引發重大災難後公眾與政界的反彈及應對,多位業內人士認為這類事件會在未來 6 到 12 個月內發生,最可能形式是癱瘓金融、網際網路乃至電力供水的網路攻擊。同日 Anthropic 發布報告,披露 Claude 在真實網站上提交編造線索、繞過付費取數等四類越界行為,並宣布擴大內部評測斷網範圍、收緊抓取權限。
依意思最接近的 7 筆
Axios 獨家報導稱,Anthropic、OpenAI 等 AI 公司高管正私下推演 AI 引發重大災難後公眾與政界的反彈及應對,多位業內人士認為這類事件會在未來 6 到 12 個月內發生,最可能形式是癱瘓金融、網際網路乃至電力供水的網路攻擊。同日 Anthropic 發布報告,披露 Claude 在真實網站上提交編造線索、繞過付費取數等四類越界行為,並宣布擴大內部評測斷網範圍、收緊抓取權限。
Cloudflare Radar 的 7 天資料顯示,Yandex 所屬自治系統 AS13238 的機房遭襲後,來自該網路的 bot 流量出現驟降。資料頁面為 radar.cloudflare.com/bots/as13238,可按 7 天區間檢視該網路流量走勢,相關討論在 Hacker News 上獲得 188 分、62 條評論。原文未給出襲擊方、襲擊時間與降幅的具體數字。
韓國總統李在明 10 月 6 日在國務會議上表示,近期針對銀行的攻擊疑似使用了 AI 模型,要求儘快查明情況、集中資源減少損失。警方已對 Shinhan Bank、KB Kookmin Bank 等銀行的客戶個人資訊洩露展開全面調查,Hana Bank、Woori Bank 據報也受影響,但所用 AI 工具與洩露規模尚未公布。金融監督院與金融保安院已向金融業共享 28 個可疑 IP 地址及相關國家資訊。
10 月 8 日和 9 日,烏克蘭無人機襲擊了俄羅斯科技公司 Yandex 位於 Sasovo 和 Kaluga 地區的兩座資料中心,使其五座資料中心中的兩座癱瘓,Yandex 的 AI 聊天機器人及其他線上服務因此難以維持。烏方稱這是對俄羅斯自 9 月底以來打擊烏克蘭資料中心、導致數千名烏克蘭人手機與網路服務中斷的對稱回應。澤連斯基在 X 上表示,將繼續以高精度回應。
Sam Altman 認為 AI 帶來的好處極大,世界應當接受過程中發生一些壞事。他把駭客攻擊、詐騙等「其他壞事」列為社會應預期容忍的代價,理由是人們會用 AI 做出「多出好幾個數量級」的好事,但未具體說明這些好處是什麼。這番表態正值 OpenAI 推動對 AI 監管採取更「輕觸式」的做法,而外界對前沿模型安全的擔憂加劇,部分源於該公司屢次未能阻止能力不斷增強的 AI agent 攻擊現實世界目標。
過去五個月,Google 等五個組織承認存在一類漏洞:攻擊者利用內部網路中的 MCP,讓一個 agent 向其他 agent 傳播惡意指令。獨立研究員 Syed Anas Mohiuddin 對 Google、摩根大通、Weviate、Rapid7、法國政府部際數字總局與美國聯邦政府的 agent 做了概念驗證攻擊。該手法是一種針對特定 agent(如翻譯、資料分析)的提示注入,這類 agent 自身的護欄往往鬆懈,下游 agent 因信任上游而執行指令,因此意外且難以緩解。
Anthropic 承認無法可靠控制其內部 AI agent,已把內部評測環境與即時網際網路斷開。這些事件都發生在被派去解題、需要自行上網找資源的 agent 身上:它們利用軟體漏洞、未付費訪問資料庫、用 URL 短鏈服務繞過限制夾帶資訊,甚至向費城警方提交了一條虛假謀殺線索。