跳到正文
原文
arXiv 人工智能· Yi Fang, Gaurav Srivastava, Sirui Ding, Xuan Wang·· 4 小时前AI 评分44

联合、解耦还是智能体:多模态对齐范式适用场景研究

Joint, Decoupled, or Agent: When Each Multimodal Alignment Paradigm Wins

AI 导读

研究对比了联合(JOINT)、解耦(DECOUPLED)与智能体(AGENT)三种多模态对齐范式,在跨 5 个领域的 16 个配对数据集及 144 种配置下,三者分别胜出 44、54 和 46 次,无单一范式全面占优。研究提出结合几何、表征诊断和元数据的两步级联预测方法,在模型拟合前选择胜出范式的准确率达 71.4%,显著优于仅基于元数据路由的 54.2%。

来源:arXiv 人工智能 · arxiv.org