跳到正文
热点事件观察中

Terminal-Bench 2.1 发布与持续验证工作流

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

2026年11月6日,arXiv Artificial Intelligence 刊出研究团队(E. Kelly Buchanan 等作者)的报道,介绍其提出的持续验证工作流并发布修复版基准 Terminal-Bench 2.1。该工作流面向智能体基准测试,结合社区报告、任务产物、智能体轨迹、自动化 oracle 检查与人工把关修复。团队对 Terminal-Bench 2.0 进行审计,发现约 30% 的题目存在问题,随后发布修复版 Terminal-Bench 2.1。报道称,修复后准确率提升超过 10 个百分点,排行榜名次最多变动三位,整体排名仍高度相关(Spearman rho = 0.958)。目前进展为:审计结果与修复版基准已公布,并给出修复前后的准确率与排名变化数据。

AI 根据报道生成 · 2 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. arXiv Artificial Intelligence
    Terminal-Bench 2.1 发布:基准测试需要持续维护

    研究团队对 Terminal-Bench 2.0 进行审计,发现约 30% 的题目存在问题,并发布修复版 Terminal-Bench 2.1,修复后准确率提升超过 10 个百分点,排行榜名次最多变动三位,整体排名仍高度相关(Spearman rho = 0.958)。

本事件热度走势

可比范围当前
3
可比范围峰值
711月7日 03:00
近 24 小时变化
-49%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。