本文へスキップ
ホットトピック継続更新中

研究评估大模型作为反仇恨言论裁判的可靠性

1 件の報道1 件の報道元15 時間前 更新

まずこの件を把握する

AI 概要

2026年11月4日,arXiv发布了一项针对12款开源权重LLM的研究,探讨大语言模型作为网络仇恨言论反驳质量裁判的能力。研究结果显示,大模型在评估反仇恨言论质量时与人类专家的一致性普遍偏低,但在不同模型之间却呈现出高度一致性。其中,表现最佳的Qwen 2.5 72B与专家的单点评分一致性指标仅为0.19;而在成对评估中,OLMo 2 32B与Llama 3.3 70B之间的一致性指标达到0.76。此外研究指出,将单点评分转化为成对标签能够显著提升部分配置下的人机一致性。

AI が報道をもとに生成 · 15 時間前 更新

報道タイムライン

報道をたどり、出来事のさまざまな側面を知る。

11月4日
  1. arXiv 自然语言处理
    评估大语言模型作为网络仇恨言论反驳质量裁判的能力

    一项针对 12 款开源权重 LLM 的研究表明,大语言模型评估反仇恨言论质量时与人类专家一致性偏低,但模型间高度一致。表现最好的 Qwen 2.5 72B 与专家的单点评分 $\kappa_l$ 仅 0.19,而成对评估中 OLMo 2 32B 与 Llama 3.3 70B 间 $\kappa$ 达 0.76。此外,将单点评分转为成对标签可显著提升部分配置的人机一致性。

このストーリーのホット度の推移

現在のホット度 7·比較可能範囲のピーク 10(11月4日 14:00)·直近24時間の比較可能な変化–

02.557.51011月4日14:0011月4日19:0011月4日23:0011月5日04:00

トレンドは継続して完全に観測した同じ主体のみを比較するため、現在のホット度の集計より範囲が狭い場合があります。ポインターの移動やタップで1時間ごとのホット度を確認でき、キーボードでは左右の矢印キーで切り替えられます。