本文へスキップ
ホットトピック継続更新中

复旦等机构提出长程代码评测基准LoLBench

1 件の報道1 件の報道元2 時間前 更新

まずこの件を把握する

AI 概要

2026年11月5日,复旦大学、香港城市大学和香港中文大学等机构提出面向复杂系统模块开发的代码评测基准LoLBench,用于评估Agent从功能提案到模块交付的完整能力。评测对6个前沿模型与5个脚手架构成的28种Agent组合进行了实测,结果显示各组合的解决率中位数仅为2%,最高解决率也仅有14%(由Opus 5配合Claude Code或mini-SWE-agent实现)。

AI が報道をもとに生成 · 2 時間前 更新

報道タイムライン

報道をたどり、出来事のさまざまな側面を知る。

11月5日
  1. AITNT · AI头条
    复旦等机构提出长程代码评测基准 LoLBench:实测 28 种 Agent 组合最高交付率仅 14%

    复旦大学、香港城市大学和香港中文大学等机构提出面向复杂系统模块开发的代码评测基准 LoLBench,用于评估 Agent 从功能提案到模块交付的完整能力。在测试 6 个前沿模型与 5 个脚手架构成的 28 种 Agent 组合中,最高解决率仅 14%(Opus 5 配合 Claude Code 或 mini-SWE-agent),组合中位数仅 2%。

このストーリーのホット度の推移

連続した観測データが足りないため、トレンドはまだ描画しません。