arXiv 自然语言处理· Yufan Zhu, Yangfan Jiang, Yang Fei, Shizheng Hou, Shubhankar Mohapatra, Xiaokui Xiao·· 10 小时前AI 评分36
QuasiLeak-Bench：评估基于 LLM 的隐私检测器策略约束准证据组恢复能力
QuasiLeak-Bench: Evaluating LLM-Based Privacy Detectors on Policy-Conditioned Quasi-Evidence Group Recovery
AI 导读
QuasiLeak-Bench 隐私评测基准正式推出，用于评估检测器在发送方披露策略约束下恢复完整准证据组并标记违规泄露的能力。实验表明现有隐私检测器迁移效果较差，本地可部署的 LLM 检测器因大幅遗漏准证据组而远落后于闭源专有模型。但经训练集微调的 4B 模型在测试文档上超越了最强的提示词模型，证实该任务具备可学习性。
来源：arXiv 自然语言处理 · arxiv.org