CME-SpectrumBench 基准发布
热点事件持续更新
CME-SpectrumBench 基准发布
1 篇报道1 个报道来源57 分钟前更新
先了解这件事
AI 综述
2026年10月20日，Jin Gene Wong 等作者在 arXiv 发布 CME-SpectrumBench，用于评测前沿大语言模型分析凝聚态实验研究级光谱数据的能力。该基准由专家设计，共含190道题目，要求模型从含噪声、受仪器分辨率限制的二维强度数组中识别结构。报道称，模型直接作答时得分普遍低于手写代码，且表现随数据分辨率和噪声/卷积水平上升而下降；在允许使用 Python 解释器（含或不含 ReAct 提示）后，LLM 表现可与手写代码相当。代码与数据已公开。目前尚无后续跟进报道，事件仍处基准发布阶段。
AI 根据报道生成 · 42 分钟前更新
最新进展10月20日 12:00
CME-SpectrumBench：LLM 能否分析凝聚态光谱数据？报道时间线
沿着报道，了解事件的不同侧面。
10月20日
- arXiv Artificial IntelligenceCME-SpectrumBench：LLM 能否分析凝聚态光谱数据？
研究者提出 CME-SpectrumBench，用 190 道专家设计的题目评测前沿 LLM 分析凝聚态实验研究级光谱数据的能力。模型需从含噪声、受仪器分辨率限制的 2D 强度数组中识别结构，直接作答时得分普遍低于手写代码，且随数据分辨率和噪声/卷积水平上升而下降。允许使用 Python 解释器（含或不含 ReAct 提示）后，LLM 表现可与手写代码相当。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。