arXiv Artificial Intelligence· Yedidia Agnimo, Anna Korba, Annabelle Blangero, Nicolas Chesneau, Karteek Alahari·· 19 小时前AI 评分42
LLM 不确定性估计器与模型幻觉的关联究竟如何?
How Do Uncertainty Estimators Align with Hallucination Occurrence in LLMs?
AI 导读
研究系统评估了 46 种不确定性估计器在内在幻觉(输出缺乏上下文支持)与外在幻觉(主张缺乏模型知识支持)两类场景下的表现,覆盖四个 benchmark 和多个 LLM。结果显示,不确定性与幻觉之间的关联差异很大且往往较弱,取决于幻觉场景和所评估的模型,这挑战了将不确定性直接作为幻觉信号的做法。
来源:arXiv Artificial Intelligence · arxiv.org