韩语转写在某一项指标上看起来很准确,但在另一项上却可能表现较弱。KsponSpeech 研究中的一个系统在其 Eval-clean 集上取得了8.0% 字符错误率(CER)、14.2% 不计空格词错误率(sWER)和 21.9% 词错误率(WER)。这些数字衡量的是不同单位;它们并不是三个相互竞争的产品宣称。下面将说明如何解读这些指标,并在你实际拥有的韩语音频上测试工具。

要点总结

CER、sWER 和 WER 衡量什么

KsponSpeech 研究评估了一个带 SpecAugment 的 Transformer,用于韩语自发语音。其 Eval-clean 结果说明了为什么指标很重要:

指标Eval-clean变化内容
CER8.0%统计字符编辑。
sWER14.2%降低词间空格差异的影响。
WER21.9%在确定词边界后统计词编辑。

这些是某一个研究模型和评测集的测量结果,并不是 MirrorCaption 或其他服务的准确率估计。WER 和 sWER 使用不同的分词方式,因此 7.7 个百分点的差距表明空格会影响分数;它并不精确统计有多少识别错误是由空格造成的。我们的转写准确率对比解释了错误率更广泛的局限性。

空格可以改变含义,却不改变字符

请看 아버지가방에들어가신다。加上空格后,아버지가 방에 들어가신다 的意思是“父亲走进房间”,而 아버지 가방에 들어가신다 的意思是“父亲走进包里”。字符完全相同。忽略空格的字符级比较无法判断是否还原了原本想表达的句子。

对于会议记录,请同时检查姓名、头衔和句子边界,而不只是总分。如果某个角色或公司名称有歧义,就要把转写结果与录音和上下文对照。KsponSpeech 作者讨论了自发语音参考文本中不一致的空格;这个例子说明为什么仅靠 CER 无法确定含义。

要单独测试韩英切换

HiKE 研究收集了 13 位双语说话者的 1,121 条韩英语句。它使用混合错误率(MER)和关注切换点的兴趣点错误率(PIER)来评估混合语音。在论文表格中,GPT-4o Transcribe 在一个单独的韩语单语 FLEURS 集上取得了 2.5% CER,而在 HiKE 上针对词级切换取得了 25.8% PIER。这些数值使用的是不同的音频和指标,因此不能直接理解为前后准确率损失。

研究人员在韩文或拉丁字母都有效时接受借词的两种写法,从而降低了该数据集上的测量错误。任何产品试用都应包含英文缩写、借词和专有名词。我们的多语言转写指南区分了原语言捕捉与翻译。

确认具体模型和工作流程

供应商的韩语支持声明并不适用于所有模型。Deepgram 的模型列表在 Nova-3 中包含 ko/ko-KR,但在 Flux 语音转文字中未列出韩语。Google Cloud 的表格列出了 ko-KR 以及模型和地区信息。请查看你计划使用的实时或上传路径对应的最新列表。

MirrorCaption 将韩语列为其实时转写语言之一,并为预期术语提供自定义词汇提示。这些辅助功能并不能保证选对同音词或空格。MirrorCaption 不公布韩语 CER,没有方言或空格选择器,也不是经过认证的转写服务。当记录涉及法律、医疗或其他高风险后果时,请使用人工复核。

五分钟韩语转写试用

  1. 选择具有代表性的音频,包含普通麦克风、背景噪声和韩英切换。
  2. 写下那些含义必须保留的人名和短语,并添加受支持的词汇提示。
  3. 将输出与人工参考对照,然后再次聆听会改变含义的错误。分别记录空格和书写系统的选择。
  4. 在供应商文档中确认具体模型、实时或文件工作流、输出格式和当前价格。

如需在浏览器中进行实时试用,打开 MirrorCaption并检查你自己的韩语语音。其免费一小时可让你在决定工作流是否合适之前先查看结果。对于录制文件,请使用单独的上传转写器,并核实其语言和导出选项是否适合你的任务。

常见问题

韩语转写有多准确?

没有单一的准确率数字。在 KsponSpeech Eval-clean 集上,一个研究系统记录了 8.0% 字符错误率、14.2% 不计空格词错误率和 21.9% 词错误率。这些是研究结果,并不保证商业工具也能达到同样水平。

为什么韩语 CER 和 WER 会不同?

因为它们统计的单位不同。标准词错误率对词边界很敏感;不计空格的 WER 会减弱空格不一致的影响。当相同的韩文字符因空格不同而被重新分组时,字符错误率可能无法发现含义变化。

一个工具能否同时转写韩语和英语录音?

有些模型支持混合语言识别,但应在你自己的语音上测试具体模型。HiKE 研究发现韩英切换点会出现错误;其单语和混合语音结果使用的是不同音频和指标,因此不能直接比较准确率。

支持韩语的供应商是否每个模型都支持韩语?

不是。Deepgram 目前在 Nova-3 中列出韩语,而其 Flux 语音转文字语言列表中没有韩语。请查看与你的录音或实时工作流对应的最新模型文档。

我应该如何测试韩语转写工具?

使用一段具有代表性的五分钟录音,包含姓名、空格歧义和英文术语。与人工参考对照,检查会改变含义的错误,并在正式采用前确认模型、导出格式和当前价格。

用你的音频试试韩语转写

利用你的免费一小时,在真实录音中检查姓名、空格和混合语言语音。

免费开始