arXiv Artificial Intelligence· Junling Liu, Chao Liu, Peilin Zhou, Qichen Ye, Dading Chong, Kang Zhou, Yueqi Xie, Yuwei Cao, Shoujin Wang, Chenyu You, Philip S. Yu·· 19 小时前AI 评分22
LLMRec：在推荐任务上评测大语言模型
LLMRec: Benchmarking Large Language Models on Recommendation Task
AI 导读
LLMRec 是一个基于 LLM 的推荐系统基准，在评分预测、序列推荐、直接推荐、解释生成和评论摘要五项推荐任务上评测了 ChatGPT、LLaMA、ChatGLM 等现成 LLM。结果显示，LLM 在序列推荐和直接推荐等准确率类任务上仅表现中等，但在可解释性任务上可与 SOTA 方法相当；研究还考察了监督微调对提升 LLM 指令遵循能力的效果。代码、处理后的数据和基准结果已公开。
来源：arXiv Artificial Intelligence · arxiv.org