TrustVLM：无需训练即可判断视觉语言模型预测是否可信

TrustVLM 是一个无需训练的框架，用于估计视觉语言模型（VLM）的预测何时可信，其置信度评分函数利用图像嵌入空间改进误分类检测。在 17 个数据集、4 种架构和 2 个 VLM 上评估，AURC 最高提升 51.87%、AUROC 提升 9.14%、FPR95 提升 32.42%。该方法无需重新训练即可提升模型可靠性，代码已公开。