Reddit · r/MachineLearning· /u/Gjuesev·· 5 小时前AI 评分11
VoxEntity-EU 基准测试显示德语和法语 ASR 转写专有名词准确率仅 34%，与文本输入法 91% 差距显著
I benchmarked whether ASR captures a dictated phone number exactly, in German and French. Whisper: 34% exact. Same text written down: 91% [P]
AI 导读
为检验 ASR 系统能否准确转写口语专有名词，作者构建了覆盖德语和法语的 VoxEntity-EU 基准，对姓名、电话号码、邮箱、日期、邮编地址和参考代码等字段做"一字差错即判负"的严格评判。两套待测 ASR 系统表现统计上无显著差异，准确率仅 34%，相比同一文本以书面形式输入时的 91% 准确率差距悬殊。基准以 null result 形式公开，含音频数据集与代码。
来源：Reddit · r/MachineLearning · reddit.com