Hacker News · AI· ltononro·· 2 小时前精选AI 评分78
Claude Code 推出自动化评测与爬山优化技能
Automating evals with Claude Code native skill
AI 导读
Claude Code 在 claude-api 技能中新增了自动化评测构建与爬山优化命令。用户通过运行 /claude-api build-eval 可在代码库内交互式采样真实流量并生成评测集与打分器，运行 /claude-api hillclimb 则能在留出测试集的防过拟合保护下，自动迭代提示词、模型选型及参数以优化准确率或降低调用成本。
推荐理由
原文展示了如何通过留出测试集与自动修补提示词防止过拟合，读者可以据此将自动化评测与爬山优化整合进日常工作流。
来源：Hacker News · AI · claude.dev