搜尋
找到 3 筆;也可以試試 語意搜尋
llama.cpp releasesAI 評分45
llama.cpp 發布 b11572,新增對 vLLM d3 模型的支援(d2 同步更新),並加入 pplx-decider 模型支援,同時澄清命名規則、加強校驗。該版本照例提供 macOS/iOS、Linux、Windows、Android、openEuler 的預編譯包,覆蓋 CUDA 12/13、ROCm 10.0、Vulkan、SYCL、OpenVINO 以及驍龍 CPU/Adreno GPU/Hexagon NPU 等後端。
Ollama releases● 精選AI 評分78
Ollama v0.40.9 可在 Apple Silicon 上用 Phonon 生成語音,ollama run 會把文字或聊天模型的回覆邊生成邊朗讀,應用也能通過相容 OpenAI 的 /v1/audio/speech 介面流式獲取音訊。同時引入來自 vLLM Semantic Router 的 d3 決策模型,含 2B、4B、9B、27B 四檔,可對文字、結構化狀態或圖片做分類、是/否判斷或機率打分。
llama.cpp releasesAI 評分40
llama.cpp 發布建置 b11577,主要修復 vllm 的 d3 多序列用例(#30408),並留下一處 TODO。同一批建置覆蓋 macOS Apple Silicon 與 Intel、iOS XCFramework、Linux、Android、Windows 與 openEuler,後端含 CPU、Vulkan、CUDA 12(12.4 DLLs)與 CUDA 13(13.4 DLLs)、ROCm 10.0、OpenVINO 與 SYCL,Snapdragon 版…