arXiv Computer Vision· Raffaele Scaringi, Alejandro Sierra-M\'unera, Gennaro Vessio, Giovanna Castellano, Ralf Krestel·· 20 小时前AI 评分22
KARAMEL：基于异构图的知识感知排序，用于艺术领域多模态实体链接
KARAMEL: Knowledge-Aware Ranking for Multimodal Entity Linking in the Arts via Heterogeneous Graphs
AI 导读
KARAMEL 是一个面向文化遗产领域的多模态实体链接框架，将视觉-语言编码器与异构图神经网络融合，通过社会历史与上下文知识实现复杂关系结构上的上下文推理。团队同时发布 WikiMuSA 数据集，通过图像、文本描述和结构化上下文知识将艺术品链接到 Wikidata 实体。实验显示 KARAMEL 在隐式或抽象提及上超越强基线，消融研究凸显领域特定结构化上下文的关键作用，数据集与源码已公开。
来源：arXiv Computer Vision · arxiv.org