10 月 11 日,Andrej Karpathy 在 X 上重新翻出自己 4 月的一條推文,稱公眾對 LLM 能力的認知差距正在擴大,已從兩群人各說各話變成一個尖銳的漏斗。他給出四層估算:約 60 億人(約 75% 人口)幾乎沒接觸過 LLM;10 至 20 億人(約 20%)只是免費版 ChatGPT 類產品的偶爾… 看完整事件
Karpathy:LLM 能力認知鴻溝擴大,僅約 0.2% 人在用前沿模型
Karpathy 稱大眾對 LLM 能力的理解差距正在擴大,已從兩撥人各說各話變成陡峭的漏斗:約 60 億人(75%)幾乎沒接觸過 LLM,10 至 20 億人(20%)只是免費版 ChatGPT 類產品的偶爾使用者,約 2000 萬人(0.2%)在數學與程式碼上專業使用前沿模型,僅約 5000 人(0.00006%)能內部訪問前沿系統。他把成因歸為三點:影響隨問題規模與時間跨度放大、能力在數字化且可驗證的領域形成鋸齒狀峰值、以及免費/付費/內部的訪問分層。
用 60 億、20 億、2000 萬、5000 人等具體數字把 LLM 使用與能力認知分層量化,並解釋鋸齒狀能力源於可驗證獎勵的強化學習,適合判斷自身所處使用層級與關注方向的開發者。
原標題:Andrej Karpathy breaks down the capability gap
閱讀原文
| 評分 | 56 / 62(平均 59,門檻 76) |
|---|---|
| 狀態 | 未入選 |
相關報導
Karpathy 分享理解 LLM 輸出的技巧:從 ASD-STE100 到解釋影片
Karpathy 認為,隨著 LLM 能力提升,人類工作將更多轉向監督與理解模型輸出,而 LLM 本身也能在這方面提供幫助。他給出的遞進式技巧包括:要求模型用航空維護文件規範 ASD-STE100 寫作、生成圖表、輸出 HTML 互動網頁,以及製作定製解釋影片,例如用 ElevenLabs API 生成 3b1b 風格影片。他強調可以要求模型產出大型、定製、用完即棄的軟體產物,如網頁應用和影片直譯器。
Karpathy 用 16200 次座標提問測試 LLM 地理能力
Karpathy 分享了一個簡單評測:向 LLM 提問「陸地還是海洋?」並給出經緯度文字座標,共詢問 16200 次後繪製成影像。結果顯示模型能正確判斷,他認為這來自對網際網路資料的壓縮。
OpenAI 公開內部前沿模型數學成果與 Lean 形式化證明
OpenAI 於 2026 年 10 月 6 日發布由內部前沿模型產出的多項數學結果,以 GitHub 倉庫形式公開,併為其中許多證明提供 Lean 形式化驗證。倉庫同時給出 10 份模型推理摘要、以 ChatGPT Pro 用量折算的算力估算,以及嘗試題目數量的統計,平均每個結果約消耗相當於 3 小時 ChatGPT Pro 思考的算力。
AlphaGo 核心作者稱 LLM 不會推理,離開 DeepMind 創業
AlphaGo 核心作者 Thore Graepel 在 MIT Technology Review 發文稱 LLM 不會推理,並已離開 Google DeepMind 創業做可審計的機器推理。他指出 AlphaGo 第 37 手是策略網路加搜尋機制的結果,而 LLM 的思維鏈仍只是預測下一個 token,缺少可檢查的認知狀態、知識與推理的分離,且常事後編造解釋。Yann LeCun 表示讚賞,認為真正推理必須涉及搜尋。
LLM 並非不可避免:技術必然性需滿足四條標準
一篇評論文章反駁 AI「不可避免」的流行說法,提出判斷一項技術是否真正必然的四條標準:能完成任務且不顯著遜色、該任務有社會價值且依賴稀缺勞動力、輸出在量或質上壓倒性超越替代方案、不用它的人無法靠改變行為抵消其影響,四條全中才算不可避免。作者以火藥與火炮為例:歐洲政治碎片化、工事多為高薄牆,火炮攻城效率遠超配重投石機,各國不得不盡快採用;而中國以夯土城牆為主,火炮價值低得多。文章認為 LLM 支持者的邏輯正是:不用的人會在權力上落後,最終受制於使用者。