跳到正文
原文
arXiv 自然语言处理· Hong Ting Tsang, Boyi Zhang, Haoyu Huang, Jiaxin Bai, Yufei Li, Yisen Gao, Zhongwei Xie, Hongyu Luo, Jeff Z. Pan, Yangqiu Song·· 2 小时前AI 评分39

MOSAIC:对话智能体长期记忆与跨模态推理的全模态基准

MOSAIC: An Omni-Modal Benchmark for Long-Term Memory and Cross-Modal Reasoning in Conversational Agents

AI 导读

研究团队推出对话智能体长期记忆评测基准 MOSAIC,包含跨文本、图像、视频和音频的 923 个问题及 11-24 个会话历史。该基准构建了针对性空间、时间与韵律信号,并配合干预表征、检索与传递的匹配诊断协议。分析显示表征损失具备模态依赖性,且模型在黄金证据下依然存在读取失败且拒答能力薄弱。

来源:arXiv 自然语言处理 · arxiv.org