arXiv Computer Vision· Alfaj Uddin Ahmed, Md. Shaown Miah, Md Arid Hasan, Syed Ishtiaque Ahmed, Sayeed Shafayet Chowdhury·· 20 小时前AI 评分28
让视觉语言模型学会拒绝:TIDE 用支持补全对抗“海市蜃楼”式幻觉
Teaching Vision-Language Models to Decline: Support Completion Against Mirage
AI 导读
针对视觉语言模型对未展示图像作答的“mirage”失败,研究者提出支持补全方法 TIDE,在训练中为每个问题配空图、同域错图和域外图,目标为拒绝作答。在 Qwen2.5-VL-7B 上,TIDE 的三条件前身将无效证据幻觉率从 0.759 降至 0.097,空图率从 0.700 降至 0.003,误拒代价为 0.126。
来源:arXiv Computer Vision · arxiv.org