@AIatMeta: Today we published a technical report on Muse Glimmer, our 30B open-weight model built for agentic …
Meta 公布了 Muse Glimmer 的技術報告,這是一個 30B 開放權重模型,面向消費級硬體上的 agentic 任務。它在 4-bit 精度下可在配備單張消費級 GPU 的 Mac 或 PC 上以實用速度執行,官方稱其在工具呼叫與多步規劃上領先同尺寸開放模型。報告還披露了模型架構、蒸餾配方與量化方案等細節。
30B 開放權重模型能在單張消費級顯示卡上跑 4-bit 推理,並公開蒸餾與量化配方,對關注本地部署和 agent 工具呼叫的開發者有直接參考價值。
原標題:@AIatMeta: Today we published a technical report on Muse Glimmer, our 30B open-weight model built for agentic …
閱讀原文
| 評分 | 85 / 84(平均 84,門檻 60) |
|---|---|
| 狀態 | 精選 |
相關報導
Meta 開源 816B 多模態 MoE 模型 Muse Spark Open
Meta 發布開放權重模型 Muse Spark Open,採用混合專家架構,總引數約 816B、每 token 啟用約 42B,可輸入文字、影像、音訊和影片,輸出文字,上下文視窗最高 100 萬 token。模型針對 agentic coding 訓練,能閱讀程式碼庫、編寫與除錯程式碼並呼叫工具。官方提供 BF16 與 NVFP4 兩種權重,BF16 約 1.5TB,NVFP4 為 4 位精度、面向 NVIDIA Blackwell GPU。
@AIatMeta: We trained our Muse foundational models, including Muse Wonder, at Prometheus, our gigawatt-scale s…
Meta 披露其 Muse 系列基礎模型(含 Muse Wonder)在俄亥俄州 New Albany 的千兆瓦級超算叢集 Prometheus 上完成訓練。該叢集擁有數十萬塊 GPU,預訓練 goodput 達 85% 以上、強化學習 90% 以上,Muse Wonder 訓練期間平均約 4.7 萬 GPU 小時才出現一次中斷。Meta 還附上了介紹 Prometheus 技術細節的連結。