跳到正文
热点事件持续更新

SANE:面向LLM评审的自动化蜕变测试框架

1 篇报道1 个报道来源18 小时前更新

先了解这件事

AI 综述

2026年10月22日,arXiv Artificial Intelligence 刊出 Ethan Ludwick、Yu-Chung Hsiao 的论文,提出 SANE——一种基于智能体的、针对特定评分器的蜕变测试框架。据该报道,SANE 将随机评估器的行为要求编码为可复用的智能体指令,自动为每个评分器推导扰动配方与预期分数关系。报道称,在五个领域中,SANE 生成的已验证测试族数量是 Judge Reliability Harness(JRH)的 3.7 倍,并在每个领域都检测出评分器缺陷,包括 JRH 未能检出的专业性与毒性领域。目前事件进展限于该论文所报告的方法与实验结果,尚无独立复现或其他来源的跟进信息。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月22日
  1. arXiv Artificial Intelligence
    SANE:面向 LLM 评审器的自动化评分器专属蜕变测试框架

    SANE 是一个基于智能体的框架,可将随机评估器的行为要求编码为可复用的智能体指令,自动为每个评分器推导扰动配方与预期分数关系。在五个领域中,SANE 生成的已验证测试族数量是 Judge Reliability Harness(JRH)的 3.7 倍,并在每个领域都检测出评分器缺陷,包括 JRH 未能检出的专业性与毒性领域。

本事件热度走势

可比范围当前
6
可比范围峰值
710月23日 03:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。