Inquesto Score:针对语音智能体可靠性的全新评估协议
随着语音智能体被广泛部署在涉及交易和关键访问权限的高风险工作流中,行业对可复现、可解释的评估体系需求日益迫切。论文提出了 Inquesto Score(IS)评估协议,用于衡量语音智能体在固定测试集下的可靠性,即在不发生功能性故障或更严重错误的前提下达成呼叫者目标的通话比例。该协议定义了显式故障事件、严重性等级及管道时序故障评测标准。
推荐理由针对语音智能体在生产环境中可靠性评测缺失的问题提出了具体评估协议,对语音 AI 工程落地有一定参考价值。
原标题:Inquesto Score: A reliability Protocol For Voice Agents
阅读 arXiv 自然语言处理 原文 ↗