跳到正文
原文
arXiv 自然语言处理· Rajarshi Roy, Shobhit Banga, Jonathan Raiman, Supriya Paul, Bhaskar Singh, Manmeet Kaur, Sagar Jain, Hanuman Sidh, Pranav Sharma, Aditya Singh, Aaditya Pareek, Manas Dhir, Adi Margolin, Niket Agarwal, Bryan Catanzaro·· 1 天前AI 评分43

IndicFDB:跨印度语言全双工语音 AI 智能体评测基准

IndicFDB: Benchmarking Full-Duplex Voice Agents across Indian Languages

AI 导读

研究人员推出评测基准 IndicFDB,将全双工语音智能体评测扩展至 10 种印度语言,共包含 12,350 个样本。该基准从约 50,000 小时对话中挖掘停顿处理、轮次转换和搭话样本,并构建了人工验证的用户打断测试。在 7 个语音智能体的评测中,商业 API 难以同时兼顾速度与停顿鲁棒性,开源全双工模型也在搭话、质量与延迟间存在权衡。

来源:arXiv 自然语言处理 · arxiv.org