跳到正文
原文
Hacker News · AI· BerislavLopac·· 4 小时前AI 评分53

AI 为什么会写出倒装怪异的“尤达语”

Why Does AI Write Like Yoda?

AI 导读

大语言模型频繁出现类似尤达的语序倒装与后置逗号修饰,根本原因在于单向自回归生成的模型无法回溯修改已输出的词汇,只能将补充信息强行追加在句尾。作者通过实验发现,若在提示词中以短语片段而非完整句子罗列事实,会引导注意力机制直接将碎片拼接在名词后,从而显著加剧此类倒装现象。这种无法原地修订的限制也是模型往往在后文主动给出第二版重写方案的底层原因。

来源:Hacker News · AI · oreilly.com