ホットトピック継続更新中
Rel-Bloom基准测试揭示多语言LLM关系推理瓶颈
1 件の報道1 件の報道元4 時間前 更新
まずこの件を把握する
AI 概要
2026年11月5日,arXiv发表论文提出Rel-Bloom多语言关系推理基准,评估了43个大语言模型在非参数记忆上的推理能力。研究发现,开源权重模型从Apply到Analyze认知层级的准确率普遍出现骤降,且Evaluate层级成为各模型的共同瓶颈。测试显示,Large Granite的准确率降幅达47.2个百分点;Gemini 3.1 Pro在前四层认知平均准确率达99.5%,但在Evaluate层级骤降至60.7%。研究指出,更强的模型能力并不保证其具备可靠的证据推理能力。
AI が報道をもとに生成 · 4 時間前 更新
最新の進展11月5日 13:00
Rel-Bloom评估43个LLM发现Evaluate层为推理瓶颈,强模型亦难以保证证据推理可靠。報道タイムライン
報道をたどり、出来事のさまざまな側面を知る。
11月5日
- arXiv 自然语言处理多语言 LLM 在非参数记忆上的推理:关系知识的认知分析
Rel-Bloom 基准评估了 43 个 LLM 的非参数关系推理能力,发现开源权重模型从 Apply 到 Analyze 层级准确率普遍骤降,且 Evaluate 成为共同瓶颈。其中 Large Granite 降幅达 47.2 个百分点,Gemini 3.1 Pro 在前四层平均达 99.5% 却在 Evaluate 骤降至 60.7%,表明更强模型能力并不保证可靠的证据推理。
このストーリーのホット度の推移
現在のホット度 9·比較可能範囲のピーク 10(11月5日 14:00)·直近24時間の比較可能な変化–
トレンドは継続して完全に観測した同じ主体のみを比較するため、現在のホット度の集計より範囲が狭い場合があります。ポインターの移動やタップで1時間ごとのホット度を確認でき、キーボードでは左右の矢印キーで切り替えられます。