跳到正文
arXiv Artificial Intelligence· Jingjing (May), Liu, Dishu Yang, Hongbo Qin, Hansong Zhang·· 19 小时前AI 评分29

测试通过却语义缺失:DataFrame 代码生成中的解释锁定现象

Passing Tests, Missing Semantics: Evidence of Interpretive Lock-In in Plan-Based DataFrame Code Generation

AI 导读

研究在 30 个源自 TPC Benchmark DS 的 DataFrame 任务上发现"解释锁定"现象:测试通过数从 22/30 升至 29/30 和 30/30,但没有一个生成方案匹配存储的参考输出。

来源:arXiv Artificial Intelligence · arxiv.org