arXiv Artificial Intelligence· Tam\'as Janusko, Sven Kleinkop, Ricardo Bochnia, Gunnar Hempel, Steffen Tomschke, J\"urgen Anke, Maik Thiele·· 2 天前AI 评分31
通过软提示调优让 LLM 评审对齐人类标注策略
Adapting LLM Judges to Observed Human Annotation Policy through Soft Prompt Tuning
AI 导读
研究用软提示调优让开源 LLM 评审更贴近人类标注策略，在 FairBotBench 上按偏见、毒性、个性化三个维度训练并评估。混合软提示调优（文本提示加可学习的连续提示嵌入）在三个维度上均比未调优基线更接近人类标注；Qwen 3.5 9B 调优后在三个维度上均超过两个托管参考评审。
来源：arXiv Artificial Intelligence · arxiv.org