arXiv Artificial Intelligence· Licheng Pan, Haocheng Yang, Haoxuan Li, Yuzhou Chen, Yichen Sun, Yuan Lu, Xiaoxi Li, Hao Wang, Zhixuan Chu, Kui Ren·· 3 小时前AI 评分24
针对 LLM 评估的保形加权：评分标准判断缺乏不确定性
Rubric Judgments Lack Uncertainty: Conformal Weighting for LLM Evaluation
AI 导读
针对基于评分标准的 LLM 评估中判断确定性因标准而异的问题，研究者提出免训练框架 Uncertainty-aware Rubric Weighting（URW），通过保形校准量化标准级判断不确定性。
来源：arXiv Artificial Intelligence · arxiv.org