arXiv 人工智能· Sida Li, Yuanxin Liu, Shicheng Li, Linli Yao, Xu Sun, Haoli Bai, Xiaohui Li·· 9 小时前AI 评分40
质量不仅关乎结果:面向代码智能体监督微调轨迹筛选的结构化评分框架 TQS
Quality, Not Just Outcome: A Structural Scoring Framework for Selecting Coding-Agent Trajectories for Supervised Fine-Tuning
AI 导读
研究人员提出代码智能体轨迹结构化评分框架 TQS,无需 LLM 裁判即可在线性时间内评估交互轨迹的过程质量。该方法通过信息聚焦、意图与动作对齐以及策略动态三个维度对轨迹结构进行打分,从 155,144 条成功轨迹中筛选优质样本。实验表明,使用 TQS 高分轨迹子集微调的代码智能体在 SWE-bench Verified 上的表现持续优于随机或低分子集。
来源:arXiv 人工智能 · arxiv.org