跳到正文
arXiv Artificial Intelligence· Jiutian Zeng, Junjie Li, Chengwei Dai, Jie Liang, Zhaoyu Hu, Yiliang Zhang, Ziang Weng, Longtao Huang, Dongjie Zhang, Libin Dong, Yang Ge, Yuanda Wang, Kaiwen Lv Kacuila, Bingyu Zhu, Jing Wang, Jin Xu·· 13 小时前AI 评分38

XekRung 技术报告:面向网络安全的前沿大语言模型

XekRung Technical Report

AI 导读

XekRung 是面向网络安全的前沿大语言模型,通过领域定制数据合成管线构建高质量训练数据,并采用持续预训练(CPT)、监督微调(SFT)与强化学习(RL)的完整训练流程。实验显示,XekRung 在同规模模型的网络安全专项基准上达到 SOTA,同时在通用基准上保持较强表现。

推荐理由模型分析

XekRung 面向网络安全领域,核心改进是配套的领域数据合成流水线,以及 CPT、SFT、RL 三段式训练流程,并引入多维评测来迭代领域与通用能力。摘要称其在同规模模型的安全基准上达到最优,同时保持通用基准表现,但未给出具体基线、任务和部署条件。安全领域开发者可据此比较领域微调与通用模型在安全任务上的取舍,并留意其证据仅限论文基准。

来源:arXiv Artificial Intelligence · arxiv.org