arXiv 自然语言处理· Brianne Lee·· 4 小时前AI 评分39
六款前沿大语言模型作者年龄误判与置信度失准案例研究
Which Answer Did the Seventeen-Year-Old Write? A Behavioral Case Study of Author-Age Misattribution, Miscalibrated Confidence, and Non-Corrective Self-Explanation in Six Frontier Language Models
AI 导读
六款前沿大语言模型在作者年龄推断中普遍失准，在高达 90% 的测试中将 17 岁学生作答误判为成年人。在涉及 Claude Fable 5、Gemini 3.1 Pro、GPT-5.6 Sol 等模型的 1,081 次 API 会话中，三款模型准确率接近 1/3 随机水平，平均置信度却达 73-88%，五款模型置信度与正确率无关或负相关。该研究的数据与代码已公开发布。
来源：arXiv 自然语言处理 · arxiv.org