Hacker News · AI· manasapalas·· 3 小时前AI 评分59
ParetoOps 推出基于单任务成功成本的 LLM 评估 CI 门禁工具
ParetoOps – CI gate on cost per successful task for LLM evals
AI 导读
ParetoOps 推出面向 LLM 评估的 CI 门禁工具,可在代码合并前依据准确率和单次成功任务成本检测提示词与模型变更引发的性能退化。
来源:Hacker News · AI · paretoops.dev