arXiv 自然语言处理· Varun Kotte·· 5 小时前AI 评分33
选择性片段标注中的辅助模型选择：最佳第二意见应在主模型出错处表现准确
The Best Second Opinion Is Right Where the Primary Is Wrong: Partner Selection for Selective Span Tagging
AI 导读
在选择性片段标注中，研究提出辅助模型应在主模型出错处保持准确，以提供更有效的第二意见协助风险排序。评估 576 组配对显示，依据主模型错误样本的留出准确率选出的辅助模型可恢复最佳模型 82% 的增益，优于基于 span F1 的 69-70%。利用预测分布打分改进了 94% 的配对，并在 51 个 MASSIVE 语言区域零样本测试中验证了有效性。
来源：arXiv 自然语言处理 · arxiv.org