arXiv Artificial Intelligence· Wen Zhang, Xiao Bai, Hsiang-wei Chao, Mengfan Zhu, Tong Zhao, Mingxuan Ju, Xiaodong Liu, Congfei Zhang, Yunzhi Zhou, Yajun Wang, Jinchao Li, Yu Zhang·· 17 小时前AI 评分22
基于 LLM 的动态商品广告用户-商品相关性评估
LLM-based User-Product Relevance Evaluation for Dynamic Product Advertising
AI 导读
研究提出一种面向动态商品广告（DPA）检索系统的离线评估指标，先将用户互动历史压缩为意图代表，再逐条评估推荐商品与各意图的相关性并聚合为用户级相关性分数。该方法以 LLM 作为语义相关性评判器，通过智能体式、与人类对齐的提示框架生成多类别相关性准则，并将教师模型判断蒸馏到高效学生模型以实现规模化评估。该指标与离线及线上业务指标强相关，可在 A/B 测试前更快、更可靠地迭代 DPA 检索。
来源：arXiv Artificial Intelligence · arxiv.org