跳到正文
arXiv Artificial Intelligence· Oskar J. Hollinsworth, Alex F. Spies, Tigist Diriba, Adam Gleave, Chris Cundy·· 19 小时前AI 评分42

用探针检测 LLM 智能体的蓄意破坏与未言明欺骗

Telling FIBS: Probes Effectively Detect Sabotage and Catch Unverbalized Deception

AI 导读

研究团队构建了迄今最大的欺骗检测数据集 FIBS,并提出一种可跨多层与多 token 聚合信息的探针架构,用于白盒欺骗检测。探针在 SHADE-Arena 和 BASH-Arena 上分别达到 98.4% 和 98.0% AUROC,优于仅文本监控的 97.9% 和 97.6%,且在模型规模扩大时效果提升。

来源:arXiv Artificial Intelligence · arxiv.org