arXiv 自然语言处理· Saman Rahbar·· 5 小时前AI 评分35
分数不代表结构:大语言模型的大脑对齐与跨语言迁移分析
The Score Is Not the Structure: Brain Alignment and Cross-Lingual Transfer
AI 导读
研究发现用于证明大语言模型与人脑或跨语言共享结构的相似度分数存在误导,缺失真实结构时分数依然虚高。实验显示跨语言语法探测器在 17 种语言中有 4 种表现处于随机水平;训练语言模型匹配脑反应时相似度虽从 0.10 升至 0.34,但破坏脑对应后得分仍达 0.31,仅 0.028 至 0.068 的提升真正特定于大脑。
来源:arXiv 自然语言处理 · arxiv.org