Hacker News · AI· notfried·· 3 小时前精选AI 评分75
微软开源 AI 编程智能体评测平台 Scope
Scope: Open-source evaluation for AI coding agents
AI 导读
微软开源了基于 Kubernetes 的评测平台 Scope,专门用于评估 AI 编程智能体与开发者软件、SDK 及文档的实际交互表现。平台采用 MIT 协议,支持驱动 GitHub Copilot、Claude Code 等智能体运行,通过 DAG 定义评测指标并由 LLM 裁判服务自动化打分,同时完整记录工具调用轨迹。
推荐理由
该平台将开发者体验延伸至智能体视角,为软件团队提供了通过可重复评测优化文档、SDK 与工具调用的标准化方法。
来源:Hacker News · AI · opensource.microsoft.com