為什麼嵌入模型常用 1536 維?
有開發者提問,為什麼嵌入模型常選 1536 維,而不是 1024 或 2048。OpenAI 使用過 1536 維嵌入,其他廠商也提供或推薦這一維度。提問者想知道這是 1024 與 2048 之間經驗性的折中點,還是存在架構或硬體上的便利原因,並希望有實際訓練或設計過嵌入模型的人回答。
依意思最接近的 8 筆
有開發者提問,為什麼嵌入模型常選 1536 維,而不是 1024 或 2048。OpenAI 使用過 1536 維嵌入,其他廠商也提供或推薦這一維度。提問者想知道這是 1024 與 2048 之間經驗性的折中點,還是存在架構或硬體上的便利原因,並希望有實際訓練或設計過嵌入模型的人回答。
Google DeepMind 推出 SynthID Bio,一套專為 AI 生成生物設計打造的水印方法。其首次實現將不可感知的簽名直接嵌入蛋白質序列,且不影響其生物功能。該技術面向 AI 生成的生物設計場景,具體使用方式與限制尚未披露。
Google DeepMind 發布一期播客,討論 AI 生成內容逼真化後如何驗證內容來自人類、機器還是自然,核心手段是來源溯源與不可感知水印。節目時間軸顯示內容涵蓋水印定義、SynthID、影像與影片、SynthID Bio 以及未來韌性,其中 SynthID 部分從 4 分 35 秒開始,SynthID Bio 從 19 分 28 秒開始。
Anthropic 宣布投入 1 億美元,用於培訓 1 萬名工程師,目標是縮小企業 AI 人才缺口。該計劃面向企業 AI 人才需求,具體課程內容、報名方式與時間安排尚未在原文中披露。
ServiceNow CoreAI 發布 AutoSynthData,用目標模型的失敗案例和更強 teacher 的成功案例定位能力缺口,再自動生成並驗證新的訓練任務。每個任務由 system specification、user prompt 和 verifier 三部分組成:任務要可行、真實、對當前模型有難度,verifier 要一致、可靠且完備。流程先用診斷任務評測目標模型,把發現提煉成能力規格卡片並據此生成新任務,模型變強後課程自動轉向它仍做不好的部分。
2026 年 10 月 3 日一篇文章指出,市面上的記憶外掛都靠 RAG:把對話切成片段存入向量庫,每次提示注入最相似的 5 條,存在相似度不等於正確、片段脫離上下文、舊記錄被當成事實、Agent 不知道自己不知道什麼、儲存不可審計等問題。作者主張改用文件式記憶,讓 Agent 工作前查閱、工作後更新 Markdown 文件,並稱已據此做出外掛 Operator Memory,不用向量資料庫和嵌入。
Capcom 在 RE: 2026 開放會議上表示,正為“與 AI 共同製作遊戲的未來”做準備,計劃把 AI 技術整合進開發工作流。程式設計師 Satoshi Ishida 在演講中稱,製作《生化危機》這一量級的遊戲時,連簡單任務都極其耗時,AI 是應對方案。但 Capcom 此前曾表示不會使用 AI。
Google DeepMind 發布了一套可快速驗證生物設計是否內建安全防護的工具,並以開放方式供研究使用。該工具面向科研人員,目的是在 AI 加速科學發現的同時,不拖慢關鍵研究進度。官方未披露具體模型名稱、效能資料或使用限制,僅提供研究用途的開放獲取連結。