arXiv 人工智能· Chuangxin Zhao, Meimei Zhang, Canran Xiao, Jiachen Luo, Jiajun He, Kaijie Chen, Huy Phan, Tomoki Toda, Bi\"orn W. Schuller·· 1 小时前AI 评分31
MERP：用于鲁棒多模态多标签情绪识别的潜在瓶颈架构
MERP: A Latent-Bottleneck Framework for Robust Multi-Modal Multi-Label Emotion Recognition
AI 导读
研究者提出了多模态情绪识别架构 MERP，通过将联合序列映射到固定大小的潜在特征库，解决推理阶段模态缺失导致模型性能骤降的问题。在 20% 测试时随机模态丢失下，MERP 在 CMU-MOSEI 和 M3ED 数据集上分别取得 0.563 和 0.780 的 micro-F1 分数；在仅保留音频的极端场景下仍保持 0.473 micro-F1，且相关代码已开源。
来源：arXiv 人工智能 · arxiv.org