跳到正文
arXiv Artificial Intelligence· Caixin Kang, Sitong Gong, Tianyu Yan, Kaipeng Zhang, Yoichi Sato, Yifei Huang·· 2 小时前AI 评分31

ZhenhuanBench:评测并训练 LLM 识破“口蜜腹剑”式礼貌敌意

Honeyed Words, Hidden Daggers: Benchmarking and Training LLMs to See Through Mock Politeness

AI 导读

研究者发布 ZhenhuanBench,一个基于《甄嬛传》专家评注构建的 1,592 条基准,覆盖说话人意图、情绪-语言错配与听者反应,并对 34 个 LLM 做纯文本评测,GPT-6 Astra 以 73.48% 总体得分居首,听者反应得分 58.37%。

来源:arXiv Artificial Intelligence · arxiv.org