arXiv 人工智能· Gabriella Bollici, Stefano De Giorgis, Wouter Van Atteveldt, Filip Ilievski·· 1 天前AI 评分31
IRON-Meme：结构化理解网络梗图叙事中身份与角色的评测基准
IRON-Meme: A Benchmark for Structured Understanding of Identities and Roles in Online Meme Narratives
AI 导读
研究人员推出人工标注评测基准 IRON-Meme，包含 1,110 张政治梗图，用于从社会身份、视角和叙事角色三个维度结构化分析梗图叙事。对 9 个视觉语言模型的评测显示，前沿规模与推理模型表现最优，但在低频标签上准确率会下降，且引入模板背景知识未能提升叙事角色分类效果。目前该基准与代码已公开。
来源：arXiv 人工智能 · arxiv.org