跳到正文
原文
TechCrunch AI· Lucas Ropek·· 3 小时前AI 评分47

HuggingFace 政策负责人表示:嵌入式 AI 评估机构并非简单易行的解决方案

Embedded AI evaluators won’t be an easy solution, Hugging Face’s policy chief says

AI 导读

HuggingFace 首席政策官 Irene Solaiman 表示,将第三方嵌入式评估机构引入 AI 机构并非易事,评估体系资质亟需标准化,且可复现性与跨测试对比仍是难题。目前 AI 评测正从单纯针对模型转向涵盖 harness 和智能体的整体系统评估,但针对智能体的评测不仅极其困难且成本高昂,行业仍需更统一的标准。

来源:TechCrunch AI · techcrunch.com