跳到正文
arXiv Artificial Intelligence· Linan Zhu, Zihao Zhai, Mengfei Xu, Xiao Han, Yuqian Fu, Xiangfan Chen, Zihang Zhang·· 19 小时前AI 评分22

CLEAR:耦合局部证据与情感表征的多模态对话情感识别框架

CLEAR: Coupling Local Evidence with Affective Representations for Multimodal Emotion Recognition in Conversation

AI 导读

CLEAR 是一个面向对话情感识别(ERC)的多模态框架,用情感监督 VLM 的连续内部表征替代其生成的标签并据此训练分类器,以缓解情感理解与标签预测不一致的问题。该框架还通过样本自适应残差耦合,将目标话语的文本与声学证据动态融入上下文表征,强化局部判别线索。在 IEMOCAP 和 MELD 上的实验显示 CLEAR 取得有竞争力的性能,代码已公开。

来源:arXiv Artificial Intelligence · arxiv.org