跳到正文
arXiv Artificial Intelligence· Paula Chikaodinaka Anyanwu, Valdini Douglace Lemofouet, Blessing Ngozi Uzor, Ifeoluwa Dorcas Awotunde, Danielle Blanche Kapsa, Tassallah Abdullahi, Clemencia Siro, Idris Abdulmumin, Seid Muhie Yimam, Shamsuddeen Hassan Muhammad·· 17 小时前AI 评分40

在低资源非洲语言中对大语言模型进行红队测试:约鲁巴语与尼日利亚皮钦语案例研究

Red-Teaming Large Language Models in Low-Resource African Languages: A Case Study of Yoruba and Nigerian Pidgin

AI 导读

一项研究用 400 条约鲁巴语和尼日利亚皮钦语显式对抗提示词评测了六款 SOTA LLM,按四类危害分类并由母语标注者打分。部分模型对英文提示词的拒绝率高达 69%,对约鲁巴语却低至 0%,原因是不理解提示词而非更安全;GPT-4o Mini 在约鲁巴语上的跨语言安全差距最大(+0.23),Gemini 2.0 Flash 跨语言表现最一致。

来源:arXiv Artificial Intelligence · arxiv.org