跳到正文
arXiv Artificial Intelligence· Chuangxin Zhao, Meimei Zhang, Canran Xiao, Jiachen Luo, Jiajun He, Kaijie Chen, Huy Phan, Tomoki Toda, Bi\"orn W. Schuller·· 18 小时前AI 评分31

MERP:面向鲁棒多模态多标签情感识别的潜在瓶颈框架

MERP: A Latent-Bottleneck Framework for Robust Multi-Modal Multi-Label Emotion Recognition

AI 导读

MERP 将多模态联合序列映射为固定大小的 latent bank,使重复推理与原始输入长度无关,并通过重建对齐潜在推理前后的标签特定证据。在 20% 测试时随机模态丢弃下,MERP 在 CMU-MOSEI 和 M3ED 上分别取得 0.563 和 0.780 的 micro-F1,超过最强基线 0.004 和 0.005。

来源:arXiv Artificial Intelligence · arxiv.org