arXiv 人工智能· Haodong Chen, Shengtao Wen, Dong Liang, Lingbing Guo, Xiang Chen·· 9 小时前AI 评分33
解耦多模态大语言模型遗忘中的知识擦除与拒绝学习
Decoupling Knowledge Forgetting and Refusal Learning in MLLM Unlearning
AI 导读
研究人员提出遗忘感知自蒸馏（FASD）方法，旨在解决多模态大语言模型遗忘中诱发虚构事实以及拒绝训练未真正消除底层知识的问题。该方法解耦为行为和知识两个通道：行为通道从提示无知状态的模型副本中蒸馏拒绝行为并掩码目标 token，知识通道则独立抑制标准答案跨度。实验表明 FASD 能成功遗忘目标知识并防止信息泄露，相关代码和数据将在发表后开源。
来源：arXiv 人工智能 · arxiv.org