AISpot

搜尋

找到 7 筆

llama.cpp releasesAI 評分42

llama.cpp 改為從 GGUF 後設資料讀取 LFM2-VL 切圖引數

llama.cpp 新建置 b11767 讓 LFM2-VL 的影像切分引數改由 GGUF 後設資料決定,不再寫死在程式碼裡。轉換 LFM2-VL mmproj 時會把 processor_config.json 中的 min_tiles、max_tiles、tile_size 和 max_pixels_tolerance 寫入模型,clip.cpp 讀取這些值,缺失時回退到原有常量。

MLX releasesAI 評分39

MLX 發布 v0.32.1,修復 GGUF 載入與多項 Metal/CUDA 問題

蘋果 MLX 框架發布 v0.32.1,修復載入 GGUF 後設資料陣列時的 int64 型別轉換錯誤,並解決 Metal 自訂核心快取同名衝突、CUDA 批次 GEMV 網格溢位等問題。該版本還新增 Metal 全注意力支援 head dimension 96、gather_qqmm 運算元與複數支援,並補充 MLX 環境變數文件。

Ollama releasesAI 評分35

v0.40.2-rc0: server: hide duplicate and downgrade guards from list (#18874)

Ollama v0.40.2-rc0 讓伺服器端不再在 list 輸出中顯示舊版 GGUF 的重複副本與降級保護條目(#18874)。當載入需要 llama.cpp 補丁集的舊 GGUF 時,Ollama 會在磁碟上做惰性轉換以相容 llama.cpp;為支援降級,它會同時保留新舊 GGUF 並建立 shadow v1 manifest tag,防止降級後的伺服器刪除新 blob。這些條目此前出現在列表裡會令使用者與 API 呼叫方困惑,舊副本將在未來版本中移除以回收磁碟空間。