arXiv · 机器人与计算机视觉· Jiaqi Zhang, Zheng Pang, Mengting Li, Yiqi Wang, Guangyuan Dong, Chao Xue, Yusen Wu, Zihao Li, Huy Phan, Sicheng Zhao, Bj\"orn W. Schuller, Jiachen Luo·· 23 天前AI 评分43
多模态情感识别中解耦学习的新框架:基于原始记忆蒸馏的缺失模态处理方案
Modality Disentangled Learning for Incomplete Multimodal Emotion Recognition: A Primitive Memory Distillation Perspective
AI 导读
PriMD 框架提出从单模态内部视角出发,将共享语义与模态特定信息解耦并离散化为可学习的语义原语以构建记忆库。在 IEMOCAP、CMU-MOSI 和 CMU-MOSEI 数据集上的实验表明,该方法在多种缺失模态设置下均实现了最先进性能及更强鲁棒性,有效缓解了整体特征推断带来的不稳定性。代码与项目网站已公开,论文已被 EMNLP 2026 Findings 接收。
来源:arXiv · 机器人与计算机视觉 · arxiv.org