LinAlg-Bench线性代数诊断基准发布
热点事件观察中
LinAlg-Bench线性代数诊断基准发布
1 篇报道1 个报道来源2 天前更新
先了解这件事
AI 综述
2026年11月6日,arXiv Artificial Intelligence刊出Shradha Agarwal等作者的论文,提出LinAlg-Bench——一个面向大模型线性代数推理的诊断基准。该基准设置3x3、4x4、5x5矩阵的维度梯度,覆盖9类任务,共660道经SymPy认证的题目,用于评测10个前沿大模型,合计检查6600条输出。作者采用三阶段自动取证流程,将1156次失败归入十个主错误标签及细分类型。结果显示4x4是关键行为阈值:低于该维度时,模型出现符号跟踪、算术漂移和奇偶错误;高于该维度时,模型转向工具角色扮演、约束一致的虚构和结构化幻觉等放弃计算的行为。报道未提及该基准的发布时间之外的其他限制或收费安排。
AI 根据报道生成 · 2 天前更新
最新进展11月6日 13:00
LinAlg-Bench:揭示LLM数学推理结构性失效模式的取证基准报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- arXiv Artificial IntelligenceLinAlg-Bench:揭示LLM数学推理结构性失效模式的取证基准
作者提出LinAlg-Bench,用3x3、4x4、5x5矩阵维度梯度上的9类任务、660道SymPy认证题评测10个前沿大模型,共检查6600条输出。三阶段自动取证流程把1156次失败归入十个主错误标签及细分类型,发现4x4是关键行为阈值:低于它模型出现符号跟踪、算术漂移和奇偶错误,高于它则转向工具角色扮演、约束一致的虚构和结构化幻觉等放弃计算的行为。
本事件热度走势
- 可比范围当前
- 3
- 可比范围峰值
- 711月7日 03:00
- 近 24 小时变化
- -49%
02468
06:0012:0018:0011月8日06:0012:00
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。