搜尋

Overtone 開源：多模型轉寫字幕並由 LLM 糾錯，按螢幕比例切分

Lont 以 MIT 許可開源了 Overtone，它同時用 gpt-transcribe、Azure STT、ElevenLabs Scribe 三個語音模型轉寫，對結果衝突的片段重新送入模型，再由 LLM 結合可選上下文提示判斷實際說了什麼，官方稱多個測試檔案的詞錯率低於單模型方案。配套的規則切分器按螢幕比例生成字幕：16:9 與 9:16 處理不同，停頓處斷行、按說話人分組，人名和數字不跨字幕。