arXiv Computer Vision· Emanuel Ben Baruch, Sivan Biham, Alon Shoshan, Yochai Zvik, Avi Ben-Cohen·· 2 小时前AI 评分24
Cross-Prompt Inference 如何缓解不平衡 VLM 微调中的稀有类抑制
Cross-Prompt Inference Mitigates Rare-Class Suppression in Imbalanced VLM Finetuning
AI 导读
视觉语言模型在类别不平衡数据上微调后，稀有类召回率可能低于其零样本表现，且推理时沿用微调描述性提示词反而比换用另一描述性提示词更差，这一现象被称为 matched-prompt penalty。
来源：arXiv Computer Vision · arxiv.org