arXiv 自然语言处理· Haeun Yu, Geert Heyman, Pepa Atanasova, Isabelle Augenstein·· 8 小时前AI 评分44
推理时上下文增强方法的实证检验
A Reality Check of Inference-Time Context Augmentation Methods
AI 导读
针对推理时上下文增强方法的研究发现,此类方法带来的准确率提升往往并非真实改进,而是纠正部分预测同时破坏其他预测的无方向扰动。研究在 3 个数据集上对 7 款不同规模模型及 5 种增强方法进行了句子级评估,发现仅增加计算时间而无增量内容的方法主要改变决策边界附近的预测。研究结果强调在实际应用前必须严格评估其准确率增益的可靠性。
来源:arXiv 自然语言处理 · arxiv.org