Skip to content
Hot storiesWatching

研究团队推出双源演化推理评测基准DuSE-Bench

1 reports1 reporting sourcesUpdated 1 day ago

Start here

AI overview

2026年11月3日,研究人员推出双源演化基准 DuSE-Bench,用于评测动态演变对话与文档的联合推理及证据归因能力。该基准包含5个场景下的1,000个任务,其中700个任务需结合对话与文档前提。在针对11种基线配置的实验中,联合推理任务的内容准确率最高仅为56.7%,且模型在回答正确时常缺乏对原始证据的完整归因。目前,该评测数据集已公开发布。

AI-generated from reports · Updated 1 day ago

Report timeline

Follow the reports to see different sides of the story.

Nov 3
  1. arXiv 自然语言处理
    DuSE-Bench:评估动态演化对话与文档联合推理能力的基准测试

    研究人员推出双源演化基准 DuSE-Bench,包含 5 个场景下的 1,000 个任务(其中 700 个需结合对话与文档前提),用于评测动态演变对话与文档的联合推理及证据归因。在 11 种基线配置的实验中,联合推理任务的内容准确率最高仅为 56.7%,且回答正确时常缺乏对原始证据的完整归因。该评测数据集已公开发布。

Story heat trend

Current heat 4·Comparable peak 9(Nov 3 18:00)·Comparable change, last 24 hours-49%

02.557.510Nov3Nov4Nov4Nov4

Trends compare only the same parties observed continuously, so the scope can be narrower than current heat counts. Move the pointer or tap the chart to see hourly heat; use the left and right arrow keys on a keyboard.