arXiv Artificial Intelligence· Wesley Lu, Runzhou Liu, Hongru Du, Xinyao Yi·· 2 小时前AI 评分31
PatternBench：评估 LLM 代码优化的编译器超越语义推理能力
Pattern-Driven Evaluation of LLM Code Optimization: Isolating Compiler-Transcendent Semantic Reasoning
AI 导读
PatternBench 是用于研究“编译器超越优化”的基准，聚焦激进编译器优化后仍残留的七类变换优化机会，并将运行时评估与基于 AST 的优化忠实性分析配对，验证生成程序是否真正实现目标优化。对前沿、开放权重和微调模型的实验显示，仅凭运行时加速无法完整反映优化能力，优化忠实性与实际加速强相关，微调同时提升忠实性与优化效果。
来源：arXiv Artificial Intelligence · arxiv.org