本文へスキップ
ホットトピック観察中

研究者提出用于LLM裁判校准的流式分位数匹配方法SQM

1 件の報道1 件の報道元1 日前 更新

まずこの件を把握する

AI 概要

2026年11月3日,针对大语言模型作为裁判(LLM-as-a-Judge)时评分与人类评价存在的分布偏移问题,研究者在 arXiv 提出流式分位数匹配(SQM)方法。该方法通过计算两者分布间的最优传输映射进行事后校准。实验结果表明,SQM 尊重人类锚定集的序数特性,在多项模型与数据测试中取得了最佳分布保真度,综合排名位列第一。此外,该校准方法还缩小了小模型裁判与大模型裁判之间的原始误差差距。

AI が報道をもとに生成 · 1 日前 更新

報道タイムライン

報道をたどり、出来事のさまざまな側面を知る。

11月3日
  1. arXiv 人工智能
    分位数而非点:面向序数感知的 LLM-as-a-Judge 流式分位数匹配校准

    针对 LLM-as-a-Judge 评分与人类评价的分布偏移,研究者提出流式分位数匹配(SQM)方法,通过计算两者分布间的最优传输映射进行事后校准。实验表明,SQM 尊重人类锚定集的序数特性,在多项模型与数据测试中取得了最佳分布保真度并位列综合排名第一。该校准还缩小了小模型与大模型裁判间的原始误差差距。

このストーリーのホット度の推移

現在のホット度 4·比較可能範囲のピーク 9(11月3日 18:00)·直近24時間の比較可能な変化-49%

02.557.51011月3日18:0011月4日03:0011月4日12:0011月4日21:00

トレンドは継続して完全に観測した同じ主体のみを比較するため、現在のホット度の集計より範囲が狭い場合があります。ポインターの移動やタップで1時間ごとのホット度を確認でき、キーボードでは左右の矢印キーで切り替えられます。