跳到正文
原文
arXiv 人工智能· Naman Vats·· 5 小时前AI 评分60

决策模型控制器未提升智能体成功率却增加 19% 成本

Good Judgment, Bad Advice: Decision-Model Controllers Raise Agent Cost Without Improving Success

AI 导读

一项针对 Claude Sonnet 5.5 终端 Agent 的研究发现,引入专用决策模型 Jev 1.13 作为控制器在保持 73.0% 通过率的同时,导致单次尝试成本增加 19%。实验对比了确定性规则与 Claude Haiku 5.5 控制器,发现 Jev 虽具备排序能力但校准不足,在 87% 已完成的任务中仍要求模型重复验证已正确的工作。

来源:arXiv 人工智能 · arxiv.org