跳到正文
原文
arXiv 自然语言处理· Yisheng Li, Dongming Han, Hongkun Pan, Bingcheng Mao, Zijian Wang, Yunlong Mao, Wei Tong, Sheng Zhong·· 9 小时前AI 评分44

当图表误导网络智能体:面向误导性可视化任务的配对基准 MisVisAgentBench

When Charts Deceive Web Agents: A Paired Benchmark for Misleading Visualization-Grounded Tasks

AI 导读

研究人员推出首个用于评估误导性可视化如何影响网络智能体执行的配对可执行评测基准 MisVisAgentBench,包含 280 个仅在图表证据上存在差异的成对任务实例。在 13 个视觉语言网络智能体上的测试显示,将清晰图表替换为误导性图表后,平均任务成功率下降超过 34 个百分点。失败行为主要沿着误导性目标动作分支发生,表明欺骗性图表会系统性重定向智能体决策。

来源:arXiv 自然语言处理 · arxiv.org