arXiv 自然语言处理· Kento Haneda, Yosuke Kishinami, Ryo Fujii, Keisuke Sakaguchi, Makoto Morishita·· 8 小时前AI 评分34
WikiOriginQA:自动构建知识起源 QA 数据集以分析文化偏见
WikiOriginQA: Automated Construction of a QA Dataset with Knowledge Origins for Analyzing Cultural Bias
AI 导读
研究人员提出 WikiOriginQA 数据集,通过维基百科不同语言版本的创建日期客观表征知识来源,实现了文化偏见分析 QA 数据集的自动化构建。基于该数据集的实验证实,LLM 性能倾向于偏向英语文化,凸显了知识向英语圈传播的重要性。该方法无需大量人工标注,即可跨多语言对模型文化偏见展开高扩展性评估。
来源:arXiv 自然语言处理 · arxiv.org