arXiv 自然语言处理· Maximilian Splieth\"over, Jannes L\"otfering, Dominik Bachmann, Alexander Espig, Willem Zuidema, Katrin Schulz, Henning Wachsmuth·· 4 小时前AI 评分35
文化(不)胜任力:探究大语言模型在特定文化刻板印象检测中的能力
Cultural (In)Competence: Investigating Culture-Specific Stereotype Detection Capabilities of LLMs
AI 导读
研究人员针对美国、荷兰和中国三种文化语境展开系统实验,评估大语言模型在特定文化刻板印象检测中的表现。结果显示,模型无法可靠地考虑文化语境且倾向于过度预测刻板印象的存在。非英语提示词有助于模型考虑文化语境,额外的指令微调能降低误报率,而训练数据规模对检测效果呈非单调调节。
来源:arXiv 自然语言处理 · arxiv.org