本文へスキップ
ホットトピック継続更新中

斯坦福与CMU等推出科研Agent评测基准ScholarCatalyst

1 件の報道1 件の報道元21 時間前 更新

まずこの件を把握する

AI 概要

2026年11月,斯坦福大学、CMU等多机构联合推出评测基准ScholarCatalyst,旨在衡量科研Agent在研究初期发现催化性、启发性论文的能力。该基准邀请了184位顶会作者回溯207项研究。评测结果显示,当前表现最佳的系统Qwen3-Embedding-8B的Top-20召回率仅约48%;同时,具备多轮规划推理能力的GPT-4.1和o3等Agent,在此项任务中并未胜过通用嵌入检索器。

AI が報道をもとに生成 · 20 時間前 更新

報道タイムライン

報道をたどり、出来事のさまざまな側面を知る。

11月2日
  1. AITNT · AI头条
    斯坦福等机构提出ScholarCatalyst基准 评估科研Agent寻找启发性文献能力

    斯坦福大学、CMU等多机构联合推出ScholarCatalyst基准,邀请184位顶会作者回溯207项研究,衡量科研Agent在研究初期发现催化论文的能力。评测显示最佳系统Qwen3-Embedding-8B的Top-20召回率仅约48%,多轮规划推理的GPT-4.1和o3等Agent并未胜过通用嵌入检索器。

このストーリーのホット度の推移

現在のホット度 6·比較可能範囲のピーク 10(11月2日 16:00)·直近24時間の比較可能な変化–

02.557.51011月2日16:0011月2日23:0011月3日05:0011月3日12:00

トレンドは継続して完全に観測した同じ主体のみを比較するため、現在のホット度の集計より範囲が狭い場合があります。ポインターの移動やタップで1時間ごとのホット度を確認でき、キーボードでは左右の矢印キーで切り替えられます。