arXiv Computer Vision· Minghao Kong, Deng Yao, Xi Zhang, Ying Gao, Jiurun Chen, Zirong Liu, Rongjie Wang·· 4 小时前AI 评分22
RM-Net:局部模态缺失下的可靠性感知多模态情感预测
Reliability-Aware Multimodal Sentiment Prediction Under Local Modality Missingness
AI 导读
RM-Net 在 CMU-MOSEI 对齐特征上处理文本、音频或视频连续片段缺失:保留原始时间位置,用学习 token 表示未观测位置,输出受观测质量门控的有界模态强度贡献,并以双视图连续片段掩码训练。
来源:arXiv Computer Vision · arxiv.org