一张生成的标题卡写着 SOV-Transcribe-1 对比 Whisper Large v3 Turbo,左侧小卡片列出 809M 参数、99 种语言并可在任何地方运行,右侧较大的卡片列出 26.6B 参数、7 种语言和 96 GB GPU,上方一条横幅写着 2.28% 对 4.62% AA-WER。
Guides & Insights

SOV-Transcribe-1 对比 Whisper Large v3 Turbo:两年时间与 2.3 个 WER 百分点的价值何在

作者

Rowan Sterling

发布日期

最新模型 · 20查看全部模型 →
基准测试:Artificial Analysis · 每日更新
返回全部文章

从任何商业意义上说,Whisper Large v3 Turbo 都不是 SOV-Transcribe-1 的竞争对手。它是现有主导者——一个 8.09 亿参数、MIT 许可的检查点,于 2024 年 10 月发布,此后发布的众多转录产品中,很大一部分底层都默默依赖它,而且它仍出现在托管端点上,价格为每千分钟 0.67 美元。SOV-Transcribe-1 则是挑战者,由 Salesforce 于 2026 年 11 月 12 日发布,在 Artificial Analysis 的综合评分中得分为 2.28%,而 Whisper Large v3 Turbo 为 4.62%。因此,问题不在于哪个模型更好,而在于:当替代方案能放进笔记本电脑内存、每小时音频只花几美分时,把错误率减半是否值得付出 53 GB 下载、96 GB GPU 和一套服务栈的代价。

两年的进展究竟换来了什么

A screenshot of the Hugging Face model card for openai/whisper-large-v3-turbo, captured 13 November 2026, showing 353k likes, the MIT licence, the 99-languages tag, the Transformers and Safetensors tags, and the automatic speech recognition and speech translation description.

Whisper Large v3 Turbo is a pruned Whisper large-v3 with the decoder cut from 32 layers to 4. O​penAI's own model card is disarmingly direct about it: "the exact same model, except that the number of decoding layers have reduced from 32 to 4. As a result, the model is way faster, at the expense of a minor quality degradation." That sentence describes a compression decision, not an architecture.

SOV-Transcribe-1 是另一种变化。Salesforce 保留了 Whisper large-v3 编码器——相同的前端——并将四层解码器替换为一个位于投影器之后的 Gemma 4 26B A4B 专家混合语言模型。音频感知继承自 Whisper。将音频转换为文字的部分是一个通用语言模型,其规模是整个 Whisper turbo 检查点的三十倍。

• 参数 — Whisper Large v3 Turbo 809M 对比 SOV-Transcribe-1 总计 26.6B,激活 4.6B。

• 解码器——4 层 Transformer 对比一个 26B 混合专家模型,每 token 激活 4.6B。

• 检查点大小 — 低于 2 GB,而 BF16 下约为 53 GB。

• 语言——大约一百种对七种。这一项则相反,而且反差很大。

• 时间戳——解码循环内置的句子级和词级输出,而另一方则无相关文档记录。

• 许可证 — MIT 与 Apache 2.0。两者均为宽松型许可证;MIT 相对更简单一些。

• 硬件 — 在启用 draft 的配置下,CPU 或小型 GPU 与配备 96 GB 的 RTX PRO 6000 级显卡的对比。

最后那句话就是整个论点的缩影。一个模型可以在任何地方运行;另一个则要运行在一个服务器部件上,而该部件的成本超过大多数转录项目全年云账单的总和。

没人做的误差算术

词错误率只是一个抽象概念,除非把它换算成需要修正的内容。拿一个包含一千分钟英语语音的语料库来说,以对话速度每分钟 150 词计算——共 150,000 词。在 4.62% 的情况下,Whisper Large v3 Turbo 会产生大约 6,900 个错误、缺失或插入的词。在 2.28% 的情况下,SOV-Transcribe-1 会产生大约 3,400 个。两者相差约 3,500 个词,而这些词无需人工查找和修正。

现在来算算修复的成本。一位细心的编辑以每分钟大约 200 到 400 词的速度将转录文本与音频核对,因此每千分钟音频少 3,500 个错误,相当于节省了 9 到 18 分钟的人工复核时间。按每小时 30 美元的综合费率计算,就是 4.50 到 9.00 美元——而托管 Whisper 这边的转录成本为 0.67 美元。

这种对比正是大多数团队始终不迁移的原因。错误带来的人力成本比转写的机器成本高出一个数量级,因此,一个能把错误减少一半的模型就应该值十倍的价格;而在实践中,它要竞争的是一个已经微不足道的价格。例外是任何完全无人审核输出的流水线——自动索引、搜索、分析、摘要供给——因为在那里错误不会被修正,而会传播到接下来读取转录文本的任何环节,真正造成严重影响的正是二阶成本。

两个得分所依据的指数本身就是一个混合体——一半是合成的智能体对话,四分之一是朗读的议会演讲,四分之一是真实的财报电话会议——而两个模型在这三个部分上的表现差异很大。Whisper Large v3 Turbo 的各分项分别为 3.52%、3.97% 和 7.49%;SOV-Transcribe-1 的各分项分别为 1.79%、1.50% 和 4.06%。差距在朗读的议会演讲上最大——1.50% 对 3.97%,相差 2.6 倍——在财报电话会议上最小,两个模型都表现不佳,差距为 4.06% 对 7.49%。如果你的音频是干净的朗读语音,升级效果非常显著。如果是杂乱的多说话人财务音频,两个模型都很差,较新的模型只是没那么差。

A generated two-column scoreboard titled SOV-Transcribe-1 vs Whisper Large v3 Turbo, contrasting AA-WER 2.28% against 4.62%, 26.6B parameters against 809M, 7 languages against about 99, no timestamps against word and sentence timestamps, a 53 GB checkpoint against under 2 GB, and Apache 2.0 against MIT.

为什么 Whisper 仍然在发票任务中胜出

先从托管方案对比开始,因为这是大多数团队实际会面对的情况。Whisper Large v3 Turbo 在 Artificial Analysis 榜单上的至少一家托管服务商处,价格为每千分钟 0.67 美元,实测速度因子为 339.5——即每 1 秒实际时间可处理 339.5 秒音频。SOV-Transcribe-1 完全没有托管方案的按分钟价格。Salesforce 发布的是权重,而不是端点,榜单上也没有任何条目给出它每 1000 分钟的价格。

因此,比较就变成了美元与 GPU 小时的对比,而模型卡为此给出了异常完整的数字。借助原生 vLLM 支持和 DFlash 草稿模型,一块 RTX PRO 6000 Blackwell Server Edition 每秒最多可转写 1,039 秒音频。让这块卡满负荷运行一小时,它能处理 374 万秒音频——即 62,340 分钟。按每小时几美元的租用价格计算,这大约相当于每千分钟音频三美分,比榜单上最便宜的托管 Whisper 端点便宜二十倍。

这个数字是真实的,但它也是本文中最具误导性的数字,因为它假设显卡从不空闲。语音转写是突发性的:夜间会积压一批任务,等处理完后,GPU 就会连续二十个小时处于零利用率状态。以每秒 1,039 音频秒的速度计算,单张卡能在不到一小时内处理完一千小时的音频。几乎没有人每天有一千小时的音频。诚实的结论是:自托管这两个模型中的任何一个,都是关于利用率的 economics 决策,而不是关于模型规模的决策——而且一旦你决定要运行一张卡,采用更好模型带来的边际成本几乎为零。

Whisper 能做到而新模型做不到的三件事

语言覆盖排在首位,而且差距悬殊。Whisper Large v3 Turbo 的模型卡列出了近百种语言,从英语和普通话,一直到威尔士语、马耳他语、夏威夷语、老挝语和巽他语。SOV-Transcribe-1 则覆盖英语、法语、德语、西班牙语、意大利语、葡萄牙语和荷兰语。对于任何音频并非欧洲语言的团队来说,这场比较根本没有下半场——Whisper 不是预算之选,而是两者之间唯一的选择。

时间戳是第二点。Whisper 的解码循环会原生预测时间戳,而 Transformers 流水线通过一个参数即可按句子或单词粒度输出时间戳;两年来,字幕、章节标记和合规检索正是基于 Whisper 的这一能力构建的。SOV-Transcribe-1 的模型卡记录了转录、风格控制和上下文偏置,却对时间戳只字未提。若要在下游恢复时间戳,就必须对输出再运行一个强制对齐器,而这又意味着另一个模型、另一项依赖和另一个错误来源。

语音翻译是第三项。Whisper 可以接收其任意源语言的音频并直接输出英文文本,将其作为解码任务,而不是第二个流水线阶段。SOV-Transcribe-1 则按所说的语言进行转写。如果你需要一部日本纪录片的字幕,Whisper 一次调用就能完成,而 Salesforce 模型完全做不到。

Whisper's documented weaknesses deserve equal billing, since they are the strongest argument for moving. O​penAI's own card warns that the model hallucinates — producing text that was not spoken — because it was trained on weakly supervised, noisy data, and that this is worse in low-resource languages. It also notes that the sequence-to-sequence architecture is prone to repetition, only partly mitigated by beam search and temperature fallback. Those are exactly the failure modes that make an unreviewed pipeline dangerous, and they are what two years of architecture work was aimed at.

真正的迁移是什么样子

几乎没有谁会真的把 Whisper 换成 SOV-Transcribe-1。人们是在两者之间做路由,而路由规则从规格说明里就能直接写出来:如果音频是英语或另外六种覆盖语言之一、单一说话人、时长不足三十分钟且实体密集,就带上提示列表交给开放模型;否则就继续留在 Whisper 上。Salesforce 的 Contextual Earnings-22 结果——关键词 F1 从无提示时的 71.9 提升到使用该片段自身关键词时的 96.8,并且在把整小时的关键词列表作为干扰项喂进去时仍保持 94.0——正是让这种分工值得的具体能力,因为这是 Whisper 的前缀提示偏置明显做不到的一点。

这种拆分带来的代价是基础设施重复以及两种输出格式:SOV-Transcribe-1 返回的是转录字符串,Whisper 返回的是文本加时间戳分块,而所有下游环节都必须同时兼容这两种格式。在实际操作中,大多数团队会在边界处将其统一转换为自己的转录数据结构,之后便不再关心是哪个模型生成的。

转录之后发生的事情,才是随业务量扩展的部分,而这正是路由器该在的位置,而不是再引入第二家语音供应商:OrcaRouter 将200+ 个文本、图像和视频模型置于同一个密钥之后,按供应商标价提供、零加价,因此消费任一种转录结果的摘要器、索引器或分类器都可以无需签订新合同即可替换或故障转移——而且该模型的供应商降价当天就能在这里生效。Whisper Large v3 Turbo 和 SOV-Transcribe-1 都不通过它提供服务;两者都是你自己运行的权重,而路由从它们输出的文本开始。

A screenshot of the OrcaRouter solutions overview, captured 13 November 2026, listing automatic failover, bring your own key, request logs, prompt caching, OrcaReplay and the agent firewall, all routed through one OpenAI-compatible endpoint covering 200+ models.

什么会让这种比较变得过时

有两件事,而且这两件事在一个发布周期内都说得通。第一件事是量化后的 SOV 检查点。Whisper Large v3 Turbo 的实际优势在于它随处都能适配;一个 26.6B 模型的 4-bit 版本仍然需要一块高性能 GPU,但 FP8 或 NVFP4 版本——也就是 NVIDIA 在 Nemotron 3.5 Transcribe 发布首日就提供的那种——会把 Salesforce 的模型从“数据中心部件”变成“工作站部件”,并大幅消解部署方面的反对意见。Salesforce 已经发布了 MLX 4-bit 版本,这也说明了方向。

第二项是时间戳和说话人分离会在一个小版本更新中到来。两者都明显缺席,而它们都是会议和媒体产品的基本要求,也恰恰是 v0.2 模型卡会补充的那类内容。如果它们落地,运行 Whisper 仅剩的理由就是上百种语言——而对很大一部分团队来说,这也是他们目前运行它的唯一理由。

在那之前,这种分工是稳定且容易说明理由的:对于任何多语言、带时间戳、长尾或受 CPU 限制的场景,Whisper Large v3 Turbo 仍是正确的默认选择;而当音频是英语、词汇表已知,并且在机器读取输出之前不会有人去看它时,SOV-Transcribe-1 就是你该选用的专用工具。