跳到正文
原文
Hacker News · AI· titusblair·· 2 小时前精选AI 评分69

METR 解读 Anthropic 研发提速 1.9 倍报告:为何实际区间在 1.1 至 2.9 倍

METR's 1.9x AI R&D speedup at Anthropic, and why it ranges from 1.1x to 2.9x

AI 导读

独立评估机构 METR 发布评估显示 Anthropic 内部模型能力增长速度达到以往的约 1.9 倍,主观估计其中约 80% 归因于 AI 本身。但该测算高度依赖链接函数假设,不同任务难度分布下提速倍数在 1.1 倍至 2.9 倍之间变动。评估涵盖未公开内部模型并基于能力指数拟合,但基准名称等多项核心数据已被 Anthropic 涂黑脱敏。

推荐理由

分析了模型研发提速评估背后的统计假设与数据盲区,有助于客观理解前沿模型自我迭代的测量局限。

来源:Hacker News · AI · theainewsreport.com