llama.cpp 加入 Chatterbox TTS 語音合成支援
llama.cpp 建置 b12097 在 mtmd 多模態模組中新增 Chatterbox TTS 語音合成支援,並帶有內建音色支援,改動來自合併的 PR #30993,Hugging Face 的 Sigbjørn Skjæret 等人參與評審。
依意思最接近的 30 筆
llama.cpp 建置 b12097 在 mtmd 多模態模組中新增 Chatterbox TTS 語音合成支援,並帶有內建音色支援,改動來自合併的 PR #30993,Hugging Face 的 Sigbjørn Skjæret 等人參與評審。
ChatGPT Voice 開始推送 GPT-Live-1.1 及其輕量版 GPT-Live-1.1 Quip,跨語言的語音口音更自然,Live 在搜尋時會用更多樣的短句提示。新增語音覆蓋法語、德語、印地語、日語、韓語和墨西哥西班牙語,另有英語的 Bubbie,可見選項因地區和帳號而異。使用者可在 Settings > Voice 中選擇語音。
企業語音 AI 平台 PolyAI 的 CTO Shawn Wen 在 HumanX 大會上表示,全雙工模型雖已實現,語音 AI 仍未迎來自己的「ChatGPT 時刻」,下一步的關鍵是讓推理足夠快、對話足夠自然。會議記錄工具 Otter 的 CMO Alex Gay 指出,說話人識別、意圖捕捉並與組織知識結合才是自動化的關鍵,Otter 還在研發可代表參會者的數字孿生。兩人都提到 ASR 模型常漏掉關鍵詞,轉寫不準會讓後續動作全部出錯、使用者失去信任;
Mistral 發布語音合成模型 Voxtral Mini TTS 3,官方稱其在 35 種以上語言和 50 多種方言上達到當前最佳的表達力。模型支援隱式指令跟隨,能從對話內容中讀出情緒、語速與重音;也支援顯式控制,用 [emotion=sad][pace=slow] 這類標籤逐行設定情緒和節奏。
OpenAI 為 ChatGPT、Codex 和 dots 的語音功能推送 GPT-Live-1.1,新增法語、德語、印地語、墨西哥西班牙語、韓語和日語的新語音,口音更自然,並減少了「checking...」這類停頓。該更新今日起向所有使用者推送,API 稍後支援。
Hurston-1 以 Apache-2.0 協議開源,這是一個基於 Maya1 微調的窄帶 TTS 模型,主攻美國英語,尤其是南方口音與地區非裔英語,輸出面向電話場景。作者從 2 萬多人處收集了 1800 小時授權語音,本次只取其中 136 小時用於微調。據作者說明,該模型不支援聲音克隆,跨 prompt 的音色也無法保持一致;它已用於 Amazon、Salesforce 等客戶,累計帶來超過 50 萬美元收入。
llama.cpp 的 server 在 b11781 建置中加入 POST /tts 端點,可直接為 TTS 模型提供語音合成服務。該端點支援通過 form-data 上傳 speaker_ref 參考音色、向 API 暴露 seed,並補齊 /tts 的路由、文件與 server_schema;mtmd 同時新增音訊輸出流 API。
Retell AI 用 OpenAI 模型驅動其客服語音 agent,月通話量從 2026 年初的 3000 萬增至 9 月的 1 億通以上,其中 80% 通話由 OpenAI 模型生成回覆,累計消耗超 1 萬億 token。在 10 月 13 日的 vCX 基準中,GPT-6 Astra 以 89.7% 指令遵循率排名第一;發布前評測顯示 GPT-5.5 非幻覺率 88.0%、工具呼叫正確率 88.3%,均高於 Gemini-3.1-Pro 與 Claude-4.6。
OpenAI 為 ChatGPT 加入音訊檔案上傳功能,可生成轉錄、總結錄音內容並針對錄音提問,還能把會議、訪談或講座整理成結構化筆記或跟進郵件草稿。該功能面向付費 ChatGPT 訂閱與工作區開放,實際可用性受工作區設定、地區、客戶端版本和模型影響。官方提示轉錄可能包含錯誤,不同語言的表現也存在差異。
OpenAI 開發者帳號宣布新增九個語音預設,全部由法語、德語、印地語、日語和韓語的母語演員錄製,覆蓋五種語言。官方同步給出 custom voices 入門指南連結,指向 developers.openai.com 的 API 文件,供開發者瞭解如何開始使用。推文未說明音色名稱、可用模型、價格與開放範圍。
Mistral AI 公布 Voxtral Small Transcribe 3,稱其在多語言轉寫、說話人分離和上下文偏置三項能力上達到當前最優(state-of-the-art)。該模型能檢測說話人何時結束髮言,使語音 agent 無需等待即可及時回應,面向需要即時語音互動的場景。官方此次只披露能力定位,未公布引數規模、基準分數、價格、許可證或上線時間,也未給出與同類模型的對比結果和開放使用方式。
開發者 Saarth 發布免費開源的 macOS 語音助手 Atticus:按住 Control-Option-Space 說出或輸入任務,開啟應用、播放 Spotify 歌單、網頁搜尋等簡單操作完全本地處理,通常一秒內完成,開啟應用約 0.08 秒;複雜任務則通過 claude -p 轉交 Claude,因此不需要 API key,直接用已有的 Claude Pro 或 Max 訂閱,平均單個任務成本不到一美分。
Uber 從 10 月 22 日起將 ChatGPT Work 推廣到全球 3 萬餘名員工,規模從 1000 人試點擴充套件為公司首個全員 agent 平台部署。該 agent 可連線 Google Drive、Gmail、Google Calendar 與 Slack,執行資料調研、會議簡報、製作演示、資料分析等跨應用多步任務。其預設模型為 GPT-6.1 Sol,以兼顧前沿效能與成本,同時提供語音、影像生成等多模態能力;Uber 工程團隊則繼續使用 Codex。
ChatGPT 聊天標籤頁中的 GPT-6 Pro 獲得更新,新增多智慧體並行能力:多個智慧體可以同時處理同一任務的不同部分。官方稱其回應更快,外掛與工具呼叫執行任務的能力也有改進;使用者可在對話中跟蹤各智慧體進度,並開啟已完成任務檢視每個智慧體具體做了什麼。該更新正面向符合條件的 Pro 使用者分批推送;託管工作區能否使用取決於工作區設定與推送資格。
OpenAI 為 ChatGPT 中的 GPT-6 Astra Pro 推送升級,回應速度更快,外掛與工具呼叫也有所改進,並新增多智慧體並行能力。多個 agent 可以分別處理同一任務的不同部分,使用者能跟蹤每個 agent 的進度,也可開啟已完成任務檢視其工作結果。該功能現面向 Pro 使用者在 Chat 標籤頁開放。
前輝達產品營銷負責人、現 Techable Ventures 創始人 Amulya Vishwanath 表示,物理 AI 目前仍處於「樂高時代」,機器人領域的 ChatGPT 時刻尚未到來。她認為,當前行業仍在搭建機械手、執行器等基礎構件,通用與專用機器人並行推進,只有這些模組成熟組合後才可能迎來突破。她同時強調人才是關鍵壁壘,大量人才正流向 Anthropic、輝達等大公司。
Splice CEO Kakul Srivastava 認為 AI 生成的郵件正在扼殺對話。她曾任職於 Flickr、Yahoo、GitHub 和 Adobe,目前執掌為音樂製作人提供取樣素材的 Splice,該平台的取樣曾出現在 Lisa 的《Money》和 Sabrina Carpenter 的《Espresso》等熱門歌曲中。她還主導了 Splice 收購 Spitfire Audio 並推動平台向新領域拓展。
Theranos 吹哨人 Tyler Shultz 警告,AI 熱潮是行騙的好機會。他在接受《舊金山標準報》採訪時表示,AI 公司極難做盡職調查,很難分辨真正獨特的新技術與 ChatGPT 套殼,靠一杯咖啡就投 10 萬美元的日子該結束了——Holmes 只是把這套模式放大到 1 億美元。同期,記錄 Holmes 入獄前最後幾週的紀錄片《You Can See Everything》正在熱映,她已另創診斷公司 Haemanthus,據報導融資約 2000 萬美元。
STEPX(階躍終端)推出旗下首款 AI 終端原生開發工具 Step Studio,創客只需使用自然語言即可生成 AI App、遊戲、智慧體和 Skill,並可通過 MCP、A2A 等協議連線外部服務與專業智慧體。
llama.cpp 建置 b12061 為 Kyutai 的 pocket-tts 模型加入免克隆的預置音色支援,使用者不必提供參考音訊即可選音色。轉換指令碼把官方權重中的音色狀態還原成提示嵌入並寫入 mmproj,服務端在 GET /props 的 voices 欄位列出可用音色,/tts 的 voice 欄位與 --tts-voice 引數用於選擇。未指定音色時預設取第一個預置音色,否則輸出近乎靜音;
Swift 包 AnySpeechRecognizer 發布,沿用 Apple SpeechAnalyzer 介面但可替換引擎,在裝置端用 Core ML 跑 NVIDIA Parakeet 與阿里 Qwen3-ASR,並新增說話人分離。Qwen3-ASR 覆蓋 30 種語言與 22 種中文方言(含粵語),但每段只給一個最終結果、無逐詞時間戳,速度慢於 Parakeet,更適合轉寫檔案。
Uber 與 OpenAI 宣布擴大合作,全球約 3 萬名員工將全面使用企業版 ChatGPT Work。該產品今年 7 月推出,定位為企業團隊的 AI agent;此前 Uber 在 1000 名員工中試點,覆蓋財務、運營、產品等部門,約 80% 為非工程師,主要用於分析運營資料、本地化培訓材料和搭建個性化儀表盤。Uber 未披露投入金額,只表示會跟蹤員工的使用方式與產出,據此決定後續在全公司部署 AI 的路徑。
Mistral 在 Voxtral 3 中附帶發布了語音 agent SDK,底層基於 LiveKit 建置。該 SDK 把語音流程串成一條流式管線:Transcribe 負責收音轉寫,一個推理模型負責思考並呼叫工具,Speech 負責生成回覆,三段串聯以支援自然、即時的語音對話。官方推文只給出這套管線結構,未披露價格、上線時間與語言支援等細節。
OpenAI 兩名團隊成員用 GPT-6 Astra,在不到一週內以副業專案的形式設計出一款用於與 Codex 對話的原型裝置。Astra 負責外殼、電路板、介面和軟體的全部設計,但要把原型真正製造出來,仍需經過多輪評審與迭代。
OpenAI 宣布 GPT-6 面向全球所有 ChatGPT 使用者開放,取代 ChatGPT 中的 GPT-5.6 Sol 與 Luna;Plus、Pro、Business、Enterprise 今天起逐步開放,Free 與 Go 使用者明天開始。最受關注的新能力是 Intelligent UI:模型可自主組合文字、圖表、按鈕與表單,生成可互動的回答介面,也能按需即時做出計算器、賬單分攤工具等小工具。
Whistle 是一個 16.9 MB 的單檔案端側語音識別模型,無依賴、在 CPU 上執行,與 Needle 共用同一套 C++ 引擎。它支援英語、德語、法語、西班牙語、義大利語、荷蘭語和波蘭語,單次最多處理 30 秒 16 kHz 單聲道音訊,可自動檢測語種,並輸出逐詞時間戳與語音嵌入。
開源工具 CATT 0.2.1 讓開發者用一個模擬的 Muse/Instinct 助手來測試自己的服務或 MCP。測試者可設定起始條件、審批和成功條件;CATT 會記錄完整互動(含工具呼叫與回應),並對比助手聲稱的結果與實際發生的情況。它支援工具呼叫與命令列訪問、模擬服務審批,並提供基於非官方 Muse 模板的 MCP profile;它可在本地或 CI 中執行,有無 LLM 後端均可。
OpenAI 從 10 月 8 日起向 ChatGPT 免費和 Go 使用者推送 GPT-6 Luna,替換此前的 GPT-5.6 Luna,Plus、Pro 等付費使用者則從 10 月 7 日起使用 GPT-6 Sol。新版聊天框加入 Intelligent UI,可按問題生成圖表、按鈕、計算器等互動元件,並能在思考時先給出部分回答,聯網搜尋問題的首答時間平均比上一代早 44%。
SpaceXAI 宣布 Grok Voice 3.0 在語音 agent 任務上達到前沿水平,延遲較此前降低 40%。官方給出的落地案例是 SpaceX 內部:該模型能自主處理 70% 的 Starlink 客服來電,無需人工介入。官方本次只披露延遲降幅與自主解決率兩項指標,未說明模型規模、開放渠道、定價與上線時間,也未提供與其他語音模型的對比資料。
Mistral 推出 Voxtral 3 語音模型系列,並配套語音 agent SDK,將監聽、推理、工具呼叫和發音整合進一條即時流式處理管線。轉寫模型 Voxtral Small Transcribe 3 支援 50+ 語言、說話人分離和關鍵詞上下文偏置,官方稱它在多語言轉寫與說話人分離基準上優於 Whisper、Scribe v2 和 Gemini 3.5 Transcribe;Mini 版僅有 4B 引數,每分鐘 0.0035 美元。