Hume AI 发布 Real World VoiceEQ 语音 AI 评测基准

Hume AI 在 Hugging Face 博文中介绍 Real World VoiceEQ，用于评估语音 AI 在情绪、语调、说话人身份和复杂声学环境等方面的表现。该基准覆盖多类语音任务，并以人工评分为核心，反映传统指标难以覆盖的真实对话质量。

摘要

Hume AI 发布了 Real World VoiceEQ，一个面向语音 AI「人类化交互质量」的评测基准。根据博文，该基准评估 40 多个专有及开源语音模型，覆盖 ASR、TTS、语音到语音和语音理解等任务，包含 15 个以上评测维度与 60 多项指标。

博文称，该项目基于超过 100 万份人工评分，重点考察文字转录中容易丢失的信息，例如语调、情绪、说话人身份及背景语境。其结论是：不同模型的能力趋于专门化；部分语音模型在「说」方面优于「听」；传统基准可能高估复杂真实环境下的表现；涉及主观听感的评估仍需要人工参与。

这类基准若被广泛采用，可能帮助开发者更具体地比较语音系统在噪声、口音、情绪表达与长对话中的表现，而不只依赖词错误率和延迟等指标。