跳到正文
arXiv Artificial Intelligence· Xiangyu Wang, Zhiwei Yu, Chengze Du, Dingchang Wang, Yuhan Ye, Fangyu Zheng·· 13 小时前AI 评分15

SuiChat-CN:中文群聊情境化自杀风险评估基准(已撤稿)

SuiChat-CN: Benchmarking Contextual Suicide Risk Assessment in Chinese Group Chats

AI 导读

SuiChat-CN 是面向中文群聊情境化自杀风险评估的基准,包含来自 1,406 名用户的 13,312 个上下文片段、258,228 条原始聊天消息,数据取自公开 Telegram 群聊。

推荐理由模型分析

该论文已被作者撤稿,撤稿说明指出基准构建与评测流程存在方法缺陷:多模型银标注池与被评测模型重叠,双向对话扩展造成跨划分上下文泄漏,导致报告结果和结论失效。对关注中文群聊自杀风险评估、LLM辅助标注与基准构建的研究者,这条撤稿记录可作为数据泄漏和标注污染的反面案例,提醒在采用类似基准前核查标注模型与评测模型是否隔离、上下文扩展是否跨划分。原文未提供可复现数据,数据集仅向认证机构开放,结论不宜直接引用。

来源:arXiv Artificial Intelligence · arxiv.org