跳到正文
arXiv Artificial Intelligence· Shivesh Rane·· 2 天前AI 评分36

仅凭模型产物即可指纹识别 LoRA 微调的训练数据领域

Embedding-Space Fingerprinting of LoRA Fine-Tunes: Recovering the Training-Data Domain from the Model Artifact Alone

AI 导读

研究用单一基座模型 Qwen3.5-0.8B 在 18 个公开数据集上生成 36 个 LoRA 微调,测试仅凭模型产物能否识别微调所用数据领域。灰盒激活与黑盒输出的领域识别准确率分别为 61% 和 64%,显著高于 20% 的随机水平,白盒权重统计仅 42%。仅用生成文本、不含 token 概率时黑盒结果仍为 64%,且不受 LoRA rank(8-64)影响。

来源:arXiv Artificial Intelligence · arxiv.org