跳到正文
原文
arXiv 自然语言处理· Lin Ai, Emma Thronson, Katherine Conhaim, Amir Zeldes·· 7 小时前AI 评分30

PROPALIGN:用于分级命题显著性评估的多摘要方法

The Sum of All Summaries: PROPALIGN for Graded Proposition Salience Evaluation

AI 导读

研究人员提出基于多摘要的命题显著性评分方法 PROPALIGN,并发布包含逾 3.5 万个命题、13.8 万条对齐数据的伴随数据集 PROPALIGNBANK。实验表明,直接让模型判断会导致结果不一致,而基于摘要的分级指标更加稳定。尽管单一模型表现不及人类,但结合语言学特征的集成模型已接近人工标注质量上限。

来源:arXiv 自然语言处理 · arxiv.org