arXiv Artificial Intelligence· Caixin Kang, Sitong Gong, Tianyu Yan, Kaipeng Zhang, Yoichi Sato, Yifei Huang·· 2 小时前AI 评分31
ZhenhuanBench:评测并训练 LLM 识破“口蜜腹剑”式礼貌敌意
Honeyed Words, Hidden Daggers: Benchmarking and Training LLMs to See Through Mock Politeness
AI 导读
研究者发布 ZhenhuanBench,一个基于《甄嬛传》专家评注构建的 1,592 条基准,覆盖说话人意图、情绪-语言错配与听者反应,并对 34 个 LLM 做纯文本评测,GPT-6 Astra 以 73.48% 总体得分居首,听者反应得分 58.37%。
来源:arXiv Artificial Intelligence · arxiv.org