Hacker News · AI· titusblair·· 2 小时前精选AI 评分69
METR 解读 Anthropic 研发提速 1.9 倍报告:为何实际区间在 1.1 至 2.9 倍
METR's 1.9x AI R&D speedup at Anthropic, and why it ranges from 1.1x to 2.9x
AI 导读
独立评估机构 METR 发布评估显示 Anthropic 内部模型能力增长速度达到以往的约 1.9 倍,主观估计其中约 80% 归因于 AI 本身。但该测算高度依赖链接函数假设,不同任务难度分布下提速倍数在 1.1 倍至 2.9 倍之间变动。评估涵盖未公开内部模型并基于能力指数拟合,但基准名称等多项核心数据已被 Anthropic 涂黑脱敏。
推荐理由
分析了模型研发提速评估背后的统计假设与数据盲区,有助于客观理解前沿模型自我迭代的测量局限。
来源:Hacker News · AI · theainewsreport.com