跳到正文
原文
arXiv 自然语言处理· Adib Sakhawat, Syed Rifat Raiyan·· 5 小时前AI 评分38

字面锁定:测试语言如何改变打字决策模型在孟加拉语习语中的字面吸引力

Literal Lock-In: How Test Language Shifts Literal Attraction in Typed Decision Models on Bengali Idioms

AI 导读

研究发现非生成式决策模型在处理孟加拉语习语时普遍存在“字面锁定”,当选项中加入习语字面释义时,会占各模型孟加拉语剩余错误的 65% 至 96%。受测模型在孟加拉语中的锁定率是英语的 1.9 至 6.4 倍,且模型置信度出现退化甚至倒挂。即便在准确率仅达随机水平的无语义选项列表中,校准最佳的模型平均置信度仍高达 0.82。

来源:arXiv 自然语言处理 · arxiv.org