The Decoder· Maximilian Schreiner·· 1 小时前精选AI 评分70
Artificial Analysis 智能指数改版,开源与闭源模型综合差距进一步拉大
New Artificial Analysis index widens the gap between open and closed models
AI 导读
Artificial Analysis 更新其 Intelligence Index 第 5 版,开源模型与榜首的差距从 3 分扩大至 12 分。新版指数首次有 60% 题目依赖私有测试集以防止刷榜,导致 Kimi K3.1 Pro 排名从第 4 跌至第 9,Grok 4.7 评分也下降 12 分。虽然私有题库能更真实地反映跨领域强化学习基建水平,但也引发了外部无法核查提示词缺陷的争议。
推荐理由
榜单通过引入私有测试集遏制针对题目的刷榜行为,为评估开源与闭源模型的真实能力差距提供了参考。
来源:The Decoder · the-decoder.com