arXiv Artificial Intelligence· Kshitish Ghate, Michael Saxon, Tadayoshi Kohno, Aylin Caliskan·2026-10-30 12:00· 17 小时前AI 评分42

RoleFUZZER：用用户行为模糊测试检验大语言模型的角色规范遵循

RoleFUZZER: User-Behaviour Fuzzing for Role-Specification Adherence in Large Language Models

AI 导读

RoleFUZZER 将软件测试中的覆盖率引导模糊测试用于 LLM 角色规范遵循检验，通过用户行为覆盖网格构造多轮交互场景。在 15 轮测试中，它对 5 种角色规范均达到 64 格行为网格至少 89% 的覆盖率；同等对话预算下改用 LLM 自由生成用户，覆盖率降至 39-69% 且违规类型更少。