Hugging Face··24 天前
介绍 Falcon ASR
Introducing Falcon ASR
这是阿布扎比技术创新研究院(TII)发布的博客文章,介绍其 1.6B 参数语音识别模型 Falcon-ASR。该模型以阿拉伯语(尤其阿联酋方言)为重点,同时支持英语、法语、西班牙语和葡萄牙语,并支持词级时间戳;文中给出了在六个阿拉伯语测试集上平均 20.92% 的词错误率及内部阿联酋方言评测结果。
- 分级
- 值得看
- 所属主题
- 整理中
- 收录时间
- 2026-10-26
推荐阅读
开放 ASR 排行榜迎来首个全球南方语言
The Open ASR Leaderboard Adds Its First Global South Language
文章介绍 Voice Arena 与 Hugging Face 合作,为印地语和印度英语推出开放的语音识别评测。文中回顾了排行榜近期在提升评测可信度方面的工作,包括使用留出的私有数据划分、量化模型是否在复述参考转写的基准拟合分析、以及完善文本规范化器以避免正确的预测或变体被错误扣分,并指出单一 WER 数字之外,识别错误率在不同人群之间分布并不均匀。适合关注语音识别评测与多语言公平性的读者。
衡量语音识别中的基准测试优化问题
Measuring benchmark optimization in speech recognition
这是一篇来自 HumeAI 等作者的文章,讨论公开语音 AI 基准分数与真实使用表现不符的现象,即模型可能因学习到基准特有的模式而提高分数,而非真正提升任务能力,这种现象常被称为 benchmark optimization 或“benchmaxxing”。文章提到作者此前在 Real World VoiceEQ、Open-ASR Leaderboard 和 Far-field ASR Leaderboard 中引入留存集(held-out sets),并指出仅扩大测量范围并不能解决该问题,且该现象在语音识别中一直难以度量。
NVIDIA Nemotron 3.5 Transcribe 与 Granary v2:可提示、可适配的智能多语言转写
NVIDIA Nemotron 3.5 Transcribe and Granary v2: Intelligent Multilingual Transcription You Can Prompt and Adapt
这是 NVIDIA 发布在 Hugging Face 上的博客,介绍开放的 Nemotron 3.5 Transcribe 模型与 Granary v2 数据流程。该模型把多语言转写、说话人区分(diarization)、翻译和音频问答整合在同一个检查点中,可转写 40 种语言,并支持提示词控制;文章同时提供 Granary v2 数据处理流程与微调方案以便适配。适合关注语音模型与开源权重的开发者阅读。
开放 TTS 排行榜:面向多语言文本转语音与声音克隆的可扩展评测
Open TTS Leaderboard: Scalable Evaluation for Multilingual Text-to-Speech and Voice Cloning
这篇博客介绍一个聚焦开源与多语言模型的文本转语音排行榜。文中指出 Hugging Face Hub 上已有超过 8000 个 TTS 模型,但评测仍分散且缺乏标准;以人类偏好投票和 Elo 计分的竞技场式排行榜(如 TTS Arena v2、Artificial Analysis Voice Arena)难以跟上模型发布速度,开源模型在其中也相对较少。
把鸡尾酒会音频当作反向图灵测试:人类胜过语音模型,但差距不够大 [P]
Cocktail-party audio as a reverse Turing test: humans beat speech models, but not by enough [P]
一篇 r/MachineLearning 社区帖子,作者用 40 段合成音频(一条目标语句混在多人声背景中)搭建了一个类似音频验证码的小实验,收集 18 场会话共 146 份人工转写,并与 Whisper base/small、Vosk、Wav2Vec2、Qwen3-ASR、Parakeet CTC、Gemini 等 8 种模型配置对比词准确率。结论是人类的平均词准确率为 0.71、通过率 77%,明显高于模型,但差距不足以做成可靠的 CAPTCHA;作者还说明指令提示可将 Gemini 从 0.34 提升到 0.54,并列出小样本、单一合成音色等局限。适合关注语音识别评测与音频人机区分方法的人阅读。