AISpot

Karpathy 用 16200 次座標提問測 LLM 地理能力

X @karpathy10/2 07:35觀點研究

Karpathy 提出一個簡單評測:只給 LLM 一個經緯度文字座標,問它“Land or Water?”,重複 16200 次後把結果畫成影像。他表示模型能答對,原因是訓練時壓縮了網際網路資料。該評測無需額外工具,可直接用 API 批次跑。

對做 coding agent 和本地模型的你來說,這是判斷模型世界知識覆蓋度的低成本基準,也能順手驗證 MLX、llama.cpp 上小模型的地理常識水平。

原標題:@karpathy: Cool eval. Simply ask an LLM “Land or Water?” and give it a latitude and longitude coordinate as te…
閱讀原文

評分45 / 62(平均 53,門檻 65)
狀態未入選