Skip to content
Hot storiesContinuously updated

研究对比五种基于LLM的学术论文评审范式

1 reports1 reporting sourcesUpdated 7 hours ago

Start here

AI overview

2026年11月2日，arXiv自然语言处理领域发布一项基于大语言模型（LLM）的学术论文质量评估评审范式对比评测研究。该研究以ICLR 2025的论文为对象，对5种基于LLM的同行评审范式进行了对比分析。评测结果表明，直接绝对评分在经过校准后，其评审一致性超过了Elo排名范式；同时在计算资源消耗方面，该方法仅消耗了Elo排名范式24%的API调用量，体现了兼顾评估一致性与更低调用成本的特点。

AI-generated from reports · Updated 6 hours ago

Latest developmentsNov 2 13:00
研究评测发现直接绝对评分经校准后一致性超过Elo排名，且仅消耗其24%的API调用量。

Report timeline

Follow the reports to see different sides of the story.

Nov 2
  1. arXiv 自然语言处理
    基于 LLM 的学术论文质量评估评审范式对比评测

    一项针对 ICLR 2025 论文的评测研究对比了 5 种基于 LLM 的同行评审范式，发现直接绝对评分经校准后的一致性超过 Elo 排名，且仅消耗其 24% 的 API 调用量。

Story heat trend

Current heat 8·Comparable peak 10（Nov 2 14:00）·Comparable change, last 24 hours–

02.557.510Nov2Nov2Nov2Nov2

Trends compare only the same parties observed continuously, so the scope can be narrower than current heat counts. Move the pointer or tap the chart to see hourly heat; use the left and right arrow keys on a keyboard.