arXiv Artificial Intelligence· Ulyana Tkachenko, Hui Wen Goh, Guram Gogia, Jonas Mueller·· 17 小时前AI 评分38
Rubricon:面向 LLM 评估与训练的自动评分标准生成与优化
Rubricon: Automated Rubric Generation and Refinement for LLM Evaluation and Training
AI 导读
Rubricon 是一套无需人工偏好标签、评分标准标注或生成模型训练的评分标准生成流程,用任意 LLM 采样多个候选并选出最具区分度的版本,再补充遗漏要求、剪除错位或浅层条目。
来源:arXiv Artificial Intelligence · arxiv.org