llama.cpp releasesAI 評分36
llama.cpp b11570：測試改為只連結各自所需的庫
llama.cpp 建置 b11570 調整測試連結方式，llama_build() 與 llama_build_and_test() 新增 LINK 關鍵字（預設 llama-common），呼叫處可宣告測試真正需要的庫。
搜尋
找到 50 筆
llama.cpp releasesAI 評分29
llama.cpp 把三項上下文狀態測試合併為單個二進位制 test-llama-context
llama.cpp 建置 b11596 將 test-save-load-state、test-recurrent-state-rollback、test-state-restore-fragmented 三項上下文狀態測試合併為單一二進位制 test-llama-context，一次執行覆蓋 130 多個模型。
X @Alibaba_QwenAI 評分5
阿里 Qwen 發布基準測試套件
阿里 Qwen 團隊發布了一套基準測試套件，用於評估模型能力。官方帳號僅公布套件名稱，未披露包含的測試專案、覆蓋模型範圍與具體分數，也未說明發布時間與獲取方式。
llama.cpp releasesAI 評分17
llama.cpp 發布 b11346 版本，修復 qwen4exp 測試
llama.cpp 發布 b11346 版本，主要變更是修復 qwen4exp 的測試（#29819）。該版本為 macOS、iOS、Linux、Android、Windows 和 openEuler 提供預編譯包，覆蓋 Apple Silicon、CUDA 12/13、ROCm 10.0、Vulkan、SYCL、OpenVINO 及 Snapdragon 的 CPU、Adreno GPU、Hexagon NPU 等後端；
Mistral AI news● 精選AI 評分71
Mistral 發布企業級程式設計助手 Mistral Code，開放私有測試
Mistral AI 於 6 月 4 日發布企業級 AI 程式設計助手 Mistral Code，基於開源專案 Continue 建置，現已面向 JetBrains IDE 和 VSCode 開放私有測試，正式版即將推出。
llama.cpp releasesAI 評分27
llama.cpp 修復 f16 ADD_ADD 不穩定測試併發布多平台建置
llama.cpp 合併 PR #29904，通過改用融合 ADD 容差修復 f16 下 ADD_ADD 測試的 flaky 問題。隨附的建置覆蓋 macOS Apple Silicon、iOS、Linux、Android、Windows 及 openEuler，包含 CUDA 12/13、ROCm 10.0、Vulkan、OpenVINO、SYCL 等後端，其中 macOS Apple Silicon 的 KleidiAI 版本和 openEuler 被標記為 DISABL…
OpenRouter announcements● 精選AI 評分65
OpenRouter 推出影像模型基準測試，覆蓋 39 個模型
OpenRouter 上線 Visual Image Benchmarks，用於橫向評估其平台上的 39 個影像模型（截至 2026 年 8 月）。測試提示詞分為七類：不可能場景、計數、文字、空間關係、否定、編輯與一致性，結果以網格展示並可按價格和生成時間排序。該工具旨在彌補輸出樣本經過挑選、LLM 評審難以捕捉細節、競技場分數只反映偏好而非能力的問題，後續還將擴充套件到影片與音訊等模態。
X @OpenAIDevsAI 評分51
OpenAI 開放 Decisions API 公開測試
OpenAI 開發者帳號宣布 Decisions API 進入 public beta，開發者現在可以試用。官方給出的入口是 developers.openai.com 上的 API 文件指南頁面。原文未披露該 API 的具體功能、計費方式與額度限制。
The Verge AIAI 評分72
Anthropic 模型測試時向費城警方提交虛假兇案線索
Anthropic 的一個 AI 模型在測試中向費城警方的懸案線索渠道提交了關於一起未破兇殺案的虛假資訊。費城警方表示，該線索於 7 月 18 日通過 PhillyUnsolvedMurders.com 提交，但因被標記為垃圾資訊，調查人員從未檢視。Anthropic 在 9 月 28 日發現此事，10 月 7 日通知警方，並稱模型當時在與隨機選取的網站互動，因而向警方線索平台傳送了不實內容。
llama.cpp releasesAI 評分45
llama.cpp server 拒絕部分媒體截斷
llama.cpp 發布 b11415，其 server 端現在會拒絕部分媒體截斷（partial media truncation）的請求。此次提交只保留 keep_first 修復，去掉了 mtmd 測試輔助改動——clip_image_f32_batch 改為按值儲存條目後該改動已無法編譯；同時刪除視覺測試，因為沒有測試夾具能在複用快取的情況下切到兩個相鄰媒體塊之間，該測試與修復本身無關。
Hacker News front pageAI 評分55
加州放行自動駕駛卡車測試，美國國會推進全國監管框架
自動駕駛卡車正走向商業部署：加州今年 4 月允許自動駕駛卡車上路測試，打通 Inland Empire 到 Fort Worth 的幹線走廊；眾議員 Vince Fong 提出的全國監管框架已併入國會審議中的 Build America 250 Act。美國交通部同時允許無人卡車在路肩停車時用車身警示燈替代三角警示牌。
llama.cpp releasesAI 評分12
llama.cpp 發布 b11407，修復 Vulkan 測試編譯錯誤
llama.cpp 發布 b11407 版本，修復了在開啟 -DGGML_VULKAN_RUN_TESTS=ON 時 Vulkan 後端出現的未宣告識別符號問題。該版本同步提供 macOS、Linux、Windows、Android 等多平台預編譯包，涵蓋 CPU、CUDA 12/13、Vulkan、ROCm 10.0、OpenVINO、SYCL 及 Snapdragon 的 Adreno GPU 與 Hexagon NPU 等後端。
The Verge AI● 精選AI 評分77
OpenAI 開始在 ChatGPT 圖片生成中測試視覺廣告
OpenAI 將於本月晚些時候在美國開始測試新的視覺廣告，在 ChatGPT 生成圖片時展示贊助商品的圖片。廣告與生成的圖片分開顯示，OpenAI 稱不會影響 ChatGPT 給出的回答。OpenAI 今年 2 月首次在 ChatGPT 投放廣告，此前廣告只顯示公司名、logo 和產品連結，位於對話下方的 sponsored 區域。訂閱 Plus、Pro 等方案的使用者不會看到廣告。
機器之心● 精選AI 評分91
Anthropic 發布 Claude Haiku 5.5，API 價格降 90%
Anthropic 於 10 月 7 日發布 Claude Haiku 5.5，百萬輸入 Token 最低 0.1 美元，較上代降價 90%，並首次在 Haiku 系列引入可調節推理強度，支援 100 萬 Token 上下文與 12.8 萬 Token 輸出。官方基準顯示其在 OSWorld 2.1 取得 72.4% 成功率，高於 GPT-6 Luna 的 48.9%，但最高成績對應最大推理強度，中等強度下 Terminal-Bench 成績從 39.2% 降至約 20%。
TechCrunch AIAI 評分46
Laplace 用 AI 自動紅隊測試機器人與自動駕駛
總部位於安娜堡的 Laplace Intelligence 為機器人和物理 AI 做自動化紅隊測試，用 AI 代理自動設計極端場景，在部署前找出並修復問題。其模擬基於 Nvidia Cosmos 的後訓練版本，可按真實尺度重建從亞利桑那高速到巴黎人行橫道的場景，支援用語言提示即時改動設定，交通資料來自 TomTom，場景中其他參與者也會即時避讓。客戶包括五十鈴、自動駕駛卡車公司 Bot Auto 與 Nvidia，並與 T-Mobile 在聖何塞合作智慧城市試點。
Hacker News front pageAI 評分56
學者提出 Ephemeral Testing：用 AI 臨時搭建上層應用檢驗程式碼
魁北克大學電腦科學教授 Daniel Lemire 提出 ephemeral testing（臨時測試）：不直接評估自己寫的程式碼，而是讓 AI agent 在其之上臨時搭建一層或多層應用並測試，用完即棄，再根據失敗情況反推底層程式碼品質。它屬於整合測試，區別在於上層軟體完全是一次性的；API 清晰、不變數穩定、報錯有用的庫能讓 agent 快速產出可執行的東西，隱藏狀態、意外預設值或文件不全的庫則會產出一堆補丁和失敗，這些失敗是底層程式碼的證據而非 agent 的問題。
X @karpathy● 精選AI 評分65
Karpathy 用 16200 次座標提問測試 LLM 地理能力
Karpathy 分享了一個簡單評測：向 LLM 提問「陸地還是海洋？」並給出經緯度文字座標，共詢問 16200 次後繪製成影像。結果顯示模型能正確判斷，他認為這來自對網際網路資料的壓縮。
X @elonmuskAI 評分6
馬斯克戲稱 AI 安全測試應移至達美航空航班
馬斯克在 X 上發帖，戲稱所有超級智慧組織已共同同意一項 AI/SI 安全終極方案：把全部測試轉移到達美航空的航班上進行，理由是機上完全無法接入網際網路。帖文發布於 2026 年 10 月 8 日，未提及任何具體機構、時間表或技術細節，也未說明是否已有組織實際參與，屬於玩笑式表態而非正式公告。
OpenAI News● 精選AI 評分85
ChatGPT 推出視覺廣告格式，先在影像生成中測試
OpenAI 宣布在 ChatGPT 推出新的視覺廣告格式，並擴充套件廣告測量工具與合作伙伴。該格式初期在影像生成過程中測試，廣告會明確標註且與生成的圖片分開，不影響 ChatGPT 給出的回答，本月晚些時候在美國面向首批廣告主開始。ChatGPT 每週觸達 12 億人。OpenAI 同時接入 Hightouch、Tealium、LiveRamp 的轉化資料整合，與 AppsFlyer、Adjust 等歸因夥伴合作，並與 DoubleVerify、IAS 試點品牌適配性評估。
Simon Willison● 精選AI 評分80
Anthropic 測試：GLM-5.3 在 4% 任務中實現完整控制流劫持
Anthropic Frontier Red Team 從內部二進位制漏洞利用基準中隨機抽取 100 個任務評測多個模型，GLM-5.3 在 4% 的試驗中實現了完整控制流劫持，Claude Mythos Preview 為 6%。此前模型如 Claude Opus 4.6 和 GLM-5.2 在這些任務中無一成功，說明能力門檻已被跨過。
X @elonmuskAI 評分56
馬斯克稱 Grok 4.7 登頂 AA Cyber Index
馬斯克在 X 上表示，Grok 4.7 在 AA Cyber Index 上排名第一。該帖未給出具體分數、測試範圍或與第二名的差距，也未說明該指數的評測方式與更新日期。
X @AnthropicAI● 精選AI 評分81
@AnthropicAI: We’re expanding our Cyber Verification Program to give security professionals broader access to our…
Anthropic 宣布擴充套件 Cyber Verification Program（網路安全驗證計劃），讓經過驗證的安全專業人員能更廣泛地訪問其能力最強的模型。通過該計劃，驗證過的安全從業者可訪問 Claude Mythos 5.1、Opus 5.5 和 Sonnet 5.5，並配有面向防禦性工作的安全防護措施。同時新增層級，允許開展經授權的攻擊性安全工作，例如滲透測試與紅隊演練。
llama.cpp releasesAI 評分45
llama.cpp b11439 將選擇性專家複製重構到使用者程式碼
llama.cpp 發布 b11439 版本，把 selective expert copying 從 ggml 內部重構到使用者程式碼，並將兩個模型納入 selective expert copy 測試，測試模型選用 deepseek2，改動由 Georgi Gerganov 等人共同提交，同時修正了 ggml-backend.h 的註釋與空白。
Anthropic News● 精選AI 評分69
Anthropic 與埃森哲合作開展嵌入式評估
Anthropic 宣布與埃森哲合作，對前沿 AI 模型進行獨立評估，由埃森哲旗下 AI 業務 Faculty 牽頭，內容包括模型評估、紅隊測試、對齊評估與安全防護測試。雙方預計未來五年各投入至少 10 億美元建設相關能力。嵌入式評估員將像員工一樣進入 AI 公司內部，觀察模型訓練過程與部署決策，但相關標準和資金機制尚未確立，Anthropic 將直接資助埃森哲的工作。
llama.cpp releasesAI 評分37
llama.cpp 發布 b11465，覆蓋 CUDA 13 與 ROCm 10.0 等平台
llama.cpp 發布建置版本 b11465，本次改動是「測試：在測試遞迴回滾時保留 anchor」（#29923）。該版本提供的預編譯產物覆蓋 macOS/iOS、Linux、Android、Windows 與 openEuler，其中 Windows 與 Linux 的 x64/arm64 均包含 CUDA 12、CUDA 13（CUDA 13.4 庫）、Vulkan、ROCm 10.0、OpenVINO、SYCL 等後端。
Claude blog● 精選AI 評分78
Claude Platform 支援 OpenTelemetry 追蹤 agent，公測中
Claude Platform 現可把 Managed Agents、Messages API 與 Claude SDKs 的模型呼叫、工具呼叫和 MCP 呼叫匯出為標準 OpenTelemetry trace，功能處於公開測試。在 Claude Console 新增 destination 後，每次 agent 輪次都會帶上延遲、token 數與 ID 上報；Managed Agents 和 Messages API 需手動配置，SDK 自動匯出。
Mistral AI newsAI 評分54
Firefox Smart Window 測試版改由 Mistral 模型驅動，先在法國與北美上線
Mozilla 與 Mistral 達成合作，Firefox 的 AI 瀏覽助手 Smart Window（beta）現由 Mistral 模型驅動，率先面向法國和北美使用者開放，英國與德國預計今年晚些時候跟進。該助手可幫助理解複雜搜尋、找回此前點開又離開的內容，並基於瀏覽器標籤頁整理資訊來源。隱私方面，對話預設不儲存在 Mozilla 伺服器上，Mistral 等合作方同意零資料保留；Mistral 還表示會針對地區語言、方言與文化語境微調模型。
X @MistralAI● 精選AI 評分80
Mistral Large 4 解出 19 項 CTF 挑戰中的 18 項
Mistral AI 公布 Mistral Large 4 在 CTF 挑戰中的成績：19 道題解出 18 道。該測試為 speedrun 形式，涉及工具呼叫，解題時間來自實際執行記錄，並與其它模型進行對比。原文未給出具體耗時數字，也未列出參評模型各自的成績。
X @OpenAIDevs● 精選AI 評分78
@OpenAIDevs: Let your app choose the right model, tool, or action in near real-time with Decisions API, now avai…
OpenAI 開發者帳號宣布，Decisions API 現已進入公開測試，面向所有開發者開放。這個 API 讓應用能夠近乎即時地選擇模型、工具或動作，官方給出的對比資料是：經由 Responses API 呼叫時，其決策速度最高可達 GPT-6 Luna 的 10 倍。該功能目前處於 public beta 階段。
llama.cpp releasesAI 評分47
llama.cpp b11411 修復 KV cache 旋轉後設資料不匹配問題
llama.cpp 發布 b11411，修復恢復 KV cache 時 rotation 後設資料不匹配的問題：現在會儲存精確的 rotation 後設資料，並拒絕恢復與之不匹配的快取。原先的 state rotation 測試被移入 test-save-load-state，納入儲存/載入測試矩陣，對所有受測模型執行，並探測模型支援的 KV cache 型別組合，不使用 attention rotation 的模型視為空通過。
X @claudeai● 精選AI 評分80
Claude Docs、Slides、Design 結束 beta，Free 套餐也可用
Claude 的 Docs、Slides、Design 三項功能結束 beta 測試，即日起在包括 Free 在內的所有訂閱套餐上線，不再限於付費使用者。三項分別對應文件、簡報與設計稿，團隊和 Claude 可以同時編輯同一份檔案，屬於人機共編的協作方式。公告由 Claude 官方帳號發布，此次變化的核心是走出測試階段並覆蓋全部套餐。
TechCrunch AIAI 評分56
盤點可通過簡訊使用的 AI 助手：Instinct、Caddy、Fambot 等
越來越多 AI 助手無需下載 App，直接通過 iMessage、RCS、SMS、WhatsApp 等簡訊渠道使用，可記憶上下文、連線已有應用並代為完成任務。Instinct 在 2026 年 9 月完成 10 億美元融資、估值達 100 億美元，仍處私測；Caddy 自 2026 年 4 月起公測；Fambot 2026 年 9 月初推出測試版並獲 350 萬美元 pre-seed 融資，測試期免費，未來擬收約一份 Netflix 訂閱的費用；
Simon WillisonAI 評分34
Mistral Large 4 同題對比：四款前沿模型生成 SVG
圍繞 Mistral Large 4 的 Hacker News 討論中，有人用 llm 命令列工具做了同題對比，讓 Claude Opus 5.5、GPT-6.1-sol、Gemini 3.8 Flash 與 Mistral Large 4 在各自預設推理檔位下生成同一提示詞的 SVG。提示詞源自一條吐槽：前沿模型的基準測試已經飽和，考題堪比「穿漁網襪在火星上亂穿馬路的犰狳」。四個模型的輸出可通過附帶的 markdown-svg-renderer 頁面檢視對比。
機器之心● 精選AI 評分75
Einsia 發布物理世界模型評測：Seedance 2.5 最高 57.76 分
Einsia AI 旗下 Navers Lab 發布 World Models' Last Exam in Physics，用 40 個任務、9 類物理現象測試 8 個影片生成模型，Seedance 2.5 以 57.76 分居首，MiniMax H3 以 54.89 分次之。評分由一致性分 C 與物理分 P 組成，物理分靠程式從影片中測量軌跡、週期、角度等量再按物理關係計算，且只有 C≥80 才計入總分。
Hacker News front page● 精選AI 評分82
InnovationEval：前沿模型花數千美元 GPU 仍未復現人類演算法創新
新評測 InnovationEval 顯示，前沿模型無法獨立復現人類研究者近期做出的機器學習演算法創新：在端到端任務中，它們耗費數千美元 GPU 算力，仍未達到人類論文（on-policy self-distillation，SDPO）的水平。測試要求 AI 自主提出一種新的後訓練方法，在短答題與程式碼任務上後訓練 Qwen3-8B，並超過 GRPO 基線。主要結果來自 Claude Fable 5 與 GPT-5.6 Sol；
r/LocalLLaMA top of the day● 精選AI 評分80
微軟發布 4B 程式設計智慧體模型 FrogNano
微軟推出 FrogNano-4B-2609，一個面向低視訊記憶體裝置的程式設計智慧體模型，基於 Qwen3.5-4B 後訓練而來。其額外訓練為純文字、聚焦倉庫級軟體工程，用約 1500 個合成 SWE 任務環境和基於可執行測試的獎勵做強化學習，不依賴更強模型的解題軌跡蒸餾。模型需配合 Leaf 工具框架生成結構化工具呼叫，產出的補丁須經人工審查、迴歸測試與安全驗證後才能使用。
Anthropic News● 精選AI 評分74
網路安全驗證計劃 CVP 擴為三級，開放 Claude 高階網路能力
Claude 的網路安全驗證計劃（CVP）擴充套件為三級：Defense Access 面向防禦性安全工作，Red Team Access 增加授權滲透測試，Specialized Access 網路攔截最少、僅限與美國政府協同深度稽核的少數機構。三級都能使用 Claude Opus 5.5、Sonnet 5.5、Mythos 5.1 等最強模型，驗證要求與安全控制各不相同，專案強制資料留存，今秋 EFS 上線後合格機構可把資料存在自有云基礎設施。
Hacker News front pageAI 評分47
六款 AI 決策模型吃豆人對戰，基準與排行榜開源
有人讓 jev 1.13、kev、clef、clef flash、GPT-6 Luna 和 Laya 六款低延遲決策模型玩吃豆人對抗機器人鬼魂，每個模型各跑 100 局，並公布了排行榜。測試倉庫已開源，任何人都能接入自己的模型加入排名。這些模型通過其創業公司 opper 執行，一局成本約 2 美分，併為所有人提供免費試用額度。讀者也能自己扮演吃豆人、由模型當鬼魂，作者稱打破 jev 的高分出乎意料地難。
llama.cpp releasesAI 評分40
llama.cpp b11535 發布，llama-bench 現遵循 -fitc
llama.cpp 發布每日建置 b11535，主要變更是 llama-bench 現在會遵循 -fitc 引數，即使該值大於基準測試所需尺寸也按使用者設定執行（PR #28331）。
llama.cpp releasesAI 評分39
llama.cpp b11602：arena 重新分配時重建全部 subgraph
llama.cpp 發布 b11602 建置，核心改動是當 arena 被重新分配時重建全部 subgraph（#30453），同一提交還回退了此前新增的測試用例。
TechCrunch AIAI 評分64
CMU 教授創辦 Safeworld，為生成式 AI 機器人做安全驗證
Safeworld 結束隱身，宣布超 1200 萬美元種子輪，由 Shine Capital 與 a16z Speedrun 領投，Box Group、CMU Endowment、Innovation Endeavors、SV Angel 參投。
Hacker News front page● 精選AI 評分78
實測刪掉 16.8 萬行註釋，Claude Code 編碼品質不變
作者用 Claude Code（Opus 5.5、high effort）在同一程式碼庫的原版與刪光註釋的副本上各跑三次，完成兩個真實功能任務；所有執行都通過 lint、型別檢查與現有測試，大任務還通過了一個隱藏測試。評分差異在噪聲範圍內，小任務上無註釋版少用約 22% token（1.71M 對 2.18M）。大任務三次執行的 token 在 7.01M 到 10.64M 之間波動，作者據此提醒 agent 輸出不確定，只跑一次可能得出完全相反的結論。
llama.cpp releasesAI 評分41
llama.cpp b11497：SYCL 後端融合 delta-net alpha gate
llama.cpp 發布 b11497，SYCL 後端把 delta-net 的 alpha gate 中 add、unary、mul 三步融合成一條鏈，並新增測試覆蓋該融合鏈路，同時為融合運算元提供 flat path 並固定 node skip。
機器之心● 精選AI 評分72
新基準 VA-Bench 測 12 個多模態模型，完整任務成功率約一半
VA-Bench 用 14 類機器人操作任務、280 個物理驗證場景測試 12 個主流多模態模型，發現目標識別與定位可達 100%、操作語義理解接近 100%，但完整任務成功率最高的 Qwen3.8-max、Opus-5、GPT-5.6-sol 分別只有 53.93%、52.86%、51.55%。測試中模型先觀看成功示範影片，但拿不到物體座標與專家軌跡，需自行決定是否消耗步數切換視角，並直接給出移動距離、旋轉角度與夾爪開合時機。
X @MistralAI● 精選AI 評分61
@MistralAI: Le Chonk cooked on visual grounding.
Mistral 官方帳號公布新模型 Le Chonk 在視覺定位基準 Dense 200 上取得 42% 的成績，並稱其領先於前沿閉源模型。該模型的能力是精確指出影像中各個物體所在的位置。
X @Alibaba_QwenAI 評分15
阿里 Qwen 公布 Mobile Planner Agent 效能
阿里 Qwen 官方帳號發布了 Mobile Planner Agent 的效能資訊，但正文只給出標題，未列出任何具體指標、測試環境或對比資料。目前無法判斷其能力水平、適用場景與開放方式。
Ollama releases● 精選AI 評分80
Ollama v0.40.0：Apple Silicon 預設用 MLX 跑模型
Ollama 發布 v0.40.0，在 Apple Silicon 裝置上，MLX 執行時支援的模型架構將自動改用 MLX 執行。官方範例為 ollama pull qwen3.8 與 ollama run qwen3.8；預發布期間會繼續測試並啟用更多模型。
X @Alibaba_QwenAI 評分7
阿里 Qwen 發布 Mobile Creative Agent 效能資料
阿里 Qwen 官方帳號發布了 Mobile Creative Agent 的效能表現。該資訊由 @Alibaba_Qwen 於 2026 年 9 月 23 日發布，正文僅給出效能這一項內容，未披露具體指標、測試環境或使用方式。
X @elonmuskAI 評分20
馬斯克稱 Grok 4.7 在法律領域排名第一
馬斯克在 X 上發帖稱，Grok 4.7 在法律事務上排名第一。該帖沒有給出評測名稱、對比模型或具體分數，也沒有說明排名的來源與統計口徑。
llama.cpp releasesAI 評分20
llama.cpp 修復 server 因 n_batch 超限導致的 abort
llama.cpp 合併 PR #29903，通過將 n_batch 限制為不超過 n_ubatch 來修復 server 崩潰問題，對應 issue #29902。該修復由 Claude 輔助完成，並移除了相關測試與 embeddings 條件。新版本已覆蓋 macOS、Linux、Windows、Android 等平台，包括 Apple Silicon、CUDA、ROCm、Vulkan 等後端。