arXiv 自然语言处理· Junwei Yao, Yongxi Zhou, Zike Yang, Zhijun Wang, Jianan Liu, Yanxian Chen, Wenbo Ye·· 9 小时前AI 评分41
单一置信度阈值导致不平等覆盖率:分类决策接口的语言差距及输入翻译的缓解作用
One Confidence Threshold, Unequal Coverage: Language Gaps in Typed Decision Interfaces and How Translating Inputs Reduces Them
AI 导读
研究表明分类决策接口采用单一置信度阈值会导致语言覆盖率不均,英语的自动处理比例显著高于其他语言。在针对 3 家厂商接口与 51 种语言共 1,000 个 MASSIVE 样本的测试中,0.9 阈值下英文过线比例平均高出 8.6-11.7 个百分点。将输入翻译为英文可在该阈值下大幅消除差距,研究建议按运行阈值分别报告各语言覆盖率。
来源:arXiv 自然语言处理 · arxiv.org