跳到正文
热点事件观察中

LinAlg-Bench线性代数诊断基准发布

1 篇报道1 个报道来源2 天前更新

先了解这件事

AI 综述

2026年11月6日,arXiv Artificial Intelligence刊出Shradha Agarwal等作者的论文,提出LinAlg-Bench——一个面向大模型线性代数推理的诊断基准。该基准设置3x3、4x4、5x5矩阵的维度梯度,覆盖9类任务,共660道经SymPy认证的题目,用于评测10个前沿大模型,合计检查6600条输出。作者采用三阶段自动取证流程,将1156次失败归入十个主错误标签及细分类型。结果显示4x4是关键行为阈值:低于该维度时,模型出现符号跟踪、算术漂移和奇偶错误;高于该维度时,模型转向工具角色扮演、约束一致的虚构和结构化幻觉等放弃计算的行为。报道未提及该基准的发布时间之外的其他限制或收费安排。

AI 根据报道生成 · 2 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. arXiv Artificial Intelligence
    LinAlg-Bench:揭示LLM数学推理结构性失效模式的取证基准

    作者提出LinAlg-Bench,用3x3、4x4、5x5矩阵维度梯度上的9类任务、660道SymPy认证题评测10个前沿大模型,共检查6600条输出。三阶段自动取证流程把1156次失败归入十个主错误标签及细分类型,发现4x4是关键行为阈值:低于它模型出现符号跟踪、算术漂移和奇偶错误,高于它则转向工具角色扮演、约束一致的虚构和结构化幻觉等放弃计算的行为。

本事件热度走势

可比范围当前
3
可比范围峰值
711月7日 03:00
近 24 小时变化
-49%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。