跳到正文
原文
Hacker News · AI· vuice·· 3 小时前精选AI 评分72

皮尤研究中心:AI 能否替代人类受访者?目前完全不行

Can AI Stand in for Human Survey-Takers? Not

AI 导读

皮尤研究中心发布实测报告指出,当前 AI 大模型尚无法替代真实人类完成严肃民调。研究团队利用 Claude Opus 4.6 为真实受访者建立数字分身并重测三期民调,跨近 300 道问题的平均绝对误差达 12 个百分点,约 28% 的题目误差超过 15 个百分点。合成样本在时效性政治议题、群体多样性分布上表现出明显刻板印象,且在常识测试中答对率远超常人,不同模型之间也呈现出不可预测的偏差分歧。

推荐理由

皮尤研究中心通过近三百道真实民调的严格对照实验,系统指出了大模型合成样本在刻板印象和常识认知上的偏差。

来源:Hacker News · AI · pewresearch.org