arXiv 自然语言处理· Esko Lehtonen, Tommi Buder-Gr\"ondahl·· 3 小时前AI 评分35
LLM 作为问卷受访者：与简单语义基线的对比
LLMs as survey respondents: Comparison to simple semantic baselines
AI 导读
一项研究评估了 3 个 LLM 根据部分人类数据预测问卷回答的能力，并将其与两个基于 embedding 相似度的简单基线进行对比。在两项交通态度调查中，LLM 的预测表现多数优于基准，但性能随已知回答比例减少而持续走低。当可用数据较少时，LLM 的回答扩充能力出现波动，甚至在其中一项调查中退化至与简单基线持平。
来源：arXiv 自然语言处理 · arxiv.org