跳到正文
原文
arXiv 自然语言处理· Khan Mahi Al Atahar, Nazifa Tasneem, Ajwad Abrar·· 11 小时前AI 评分28

大语言模型跨语言生成式摘要评测:针对英语与孟加拉语的综合研究

Evaluating Large Language Models for Multilingual Abstractive Summarization: A Comprehensive Study of English and Bengali

AI 导读

研究人员在英语和孟加拉语 XL-Sum 测试集上,对 8 款闭源和开源 LLM 进行了标准化零样本生成式摘要评测。评测显示强大英语摘要能力难以直接迁移到孟加拉语:GPT-5.6 Luna 在多项英语词汇指标上领先但在孟加拉语中优势减弱,LLaMA 3.3 70B 取得孟加拉语最高 ROUGE 和 BLEU 分数,Gemini 2.5 Flash 则获得最高的事实性得分。

来源:arXiv 自然语言处理 · arxiv.org