Hot storiesWatching
研究团队推出双源演化推理评测基准DuSE-Bench
1 reports1 reporting sourcesUpdated 1 day ago
Start here
AI overview
2026年11月3日,研究人员推出双源演化基准 DuSE-Bench,用于评测动态演变对话与文档的联合推理及证据归因能力。该基准包含5个场景下的1,000个任务,其中700个任务需结合对话与文档前提。在针对11种基线配置的实验中,联合推理任务的内容准确率最高仅为56.7%,且模型在回答正确时常缺乏对原始证据的完整归因。目前,该评测数据集已公开发布。
AI-generated from reports · Updated 1 day ago
Latest developmentsNov 3 13:00
研究团队推出评测基准DuSE-Bench并公开发布,实验显示联合推理最高准确率仅56.7%。Report timeline
Follow the reports to see different sides of the story.
Nov 3
- arXiv 自然语言处理DuSE-Bench:评估动态演化对话与文档联合推理能力的基准测试
研究人员推出双源演化基准 DuSE-Bench,包含 5 个场景下的 1,000 个任务(其中 700 个需结合对话与文档前提),用于评测动态演变对话与文档的联合推理及证据归因。在 11 种基线配置的实验中,联合推理任务的内容准确率最高仅为 56.7%,且回答正确时常缺乏对原始证据的完整归因。该评测数据集已公开发布。
Story heat trend
Current heat 4·Comparable peak 9(Nov 3 18:00)·Comparable change, last 24 hours-49%
Trends compare only the same parties observed continuously, so the scope can be narrower than current heat counts. Move the pointer or tap the chart to see hourly heat; use the left and right arrow keys on a keyboard.