跳到正文
原文
arXiv 自然语言处理· Abdu Sallouh, Nicholas Popovi\v{c}, Michael F\"{a}rber·· 5 小时前AI 评分36

现代标准阿拉伯语是否在大语言模型中主导方言表征?一项表征层面的分析

Does Modern Standard Arabic (MSA) Dominate Arabic Dialects in LLMs? A Representation-Level Analysis

AI 导读

一项针对 26 种阿拉伯语变体的研究发现,跨层和跨模型家族均无证据表明大语言模型(LLM)的内部表征由现代标准阿拉伯语(MSA)主导。相反,各方言表征呈现出密集且高度重叠的特征,模型偏向生成 MSA 并不代表其内部表征被 MSA 主导。研究指出分析多语言与方言 LLM 时应区分生成偏好与内部表征几何结构。

来源:arXiv 自然语言处理 · arxiv.org