跳到正文
arXiv Artificial Intelligence· Subhankar Maity, Faiza Belbachir, Omar Boucelma, Guilherme Medeiros Machado·· 13 小时前AI 评分31

分析 LLM 编程教育中的代码溯源

Analyzing Code Provenance in LLMs for Programming Education

AI 导读

研究扩展 Min-K% 概率方法,结合合成非成员代码生成,对 Python 代码做成员推断与来源追踪,以区分学生原创、AI 生成和外部来源代码。评估覆盖 GPT-2、DistilGPT-2、DialoGPT 及 GPT-5、Gemini 2.5、Mistral、DeepSeek、LLaMA 3.3,并在高等教育学生作业前用 Stack Overflow 数据验证可行性。

推荐理由模型分析

该研究把 Min-K% 概率方法扩展到代码溯源,加入合成非成员代码生成,用于区分学生自写、AI 生成和外部来源代码。作者先在 Stack Overflow 数据上验证可行性,再用于高校作业,并比较 GPT-2 等免费模型与 GPT-5、Gemini 2.5 等商业模型的检测灵敏度与隐私权衡。适合编程教育评估与 AI 代码检测方向的研究者参考其基线和适用条件,但结论限于所测模型与数据集。

来源:arXiv Artificial Intelligence · arxiv.org