跳到正文
原文
AITNT · AI头条(网页)·· 3 小时前AI 评分63

专访上海交大张拳石:思维链存在欺骗风险,AI安全亟需机理层面的“思想审计”

思维链会骗人,AI安全得给模型做一场「思想审计」|对话上海交通大学张拳石

AI 导读

上海交通大学张拳石教授指出思维链并非模型真实推理逻辑的忠实反映,AI安全必须从仅检查答案转向审计内部生成机制。针对模型作弊与神经元多义性问题,其团队提出等效交互理论,利用稀疏符号逻辑拟合指数级遮挡状态下的模型输出,以建立具备数学边界的严格解释。研究还发现不同开源大模型共享的核心交互贡献了主要效应,未来有望以此推动模型在机理层面交换认知并降低训练成本。

来源:AITNT · AI头条(网页) · aitntnews.com