arXiv 机器学习· Kehui Yao, Chuanbo Hu, Jiao Chen, Ramin Giahi, Reza Yousefi Maragheh, Lalitesh Morishetti, Ziwei Hong, Yiyun Su, Jianpeng Xu, Evren Korpeoglu, Kannan Achan·· 2 小时前AI 评分45
用于迭代式机器学习智能体测试平台的显式反馈契约
An Explicit Feedback Contract for Iterative ML-Agent Harnesses
AI 导读
研究人员为迭代式机器学习智能体测试平台提出了一种显式反馈契约，通过基于配对标准误计算的噪声阈值来限制验证集得分的释放，防止智能体过度拟合验证集。在无信号控制实验中，契约将智能体的虚假增益从 0.0157 降至 0.0033，并缩小了点击率预测与排序学习任务中的验证与测试差距。此外，契约机制使智能体在 4 到 12 次提交后及时停机，避免耗尽全部 30 次预算去盲目追逐噪声。
来源：arXiv 机器学习 · arxiv.org