跳到正文
arXiv Artificial Intelligence· Liangjian Wen, Qun Dai, Jiang Duan, Yong Dai, Jianzhuang Liu, Dongkai Wang, Jun Wang, Fuyuan Cao, Zenglin Xu, Zhao Kang·· 2 天前AI 评分31

InfMasking:面向多模态协同学习的统一变分框架

InfMasking: A Unified Variational Framework for Synergistic Multimodal Learning

AI 导读

InfMasking 是一个基于 Infinite Masking 的统一多模态学习框架,在融合前随机掩码各模态特征,并要求所有掩码后的融合表示与参考目标保持一致,从而避免融合模块依赖主导模态或共享信息。

来源:arXiv Artificial Intelligence · arxiv.org