跳到正文
arXiv Artificial Intelligence· Hanwen Zhang, Enyi Jiang, Ruike Zhu, Qinan Yu, Sanmi Koyejo·· 2 小时前AI 评分38

REACT:链式推理轨迹的表征早期分析与控制

REACT: Representational Early Analysis and Control of Chain-of-Thought Trajectories

AI 导读

REACT 通过从安全与不安全轨迹对中学习安全方向,在早期 CoT 隐藏状态上施加一次条件激活干预,模型权重保持冻结。在三个蒸馏推理模型上,最强效果集中在第 2-3 个 token 的早期窗口;在 DeepSeek-R1-Distill-Llama-8B 上,第 4、5 个 token 处效果降至接近零。

来源:arXiv Artificial Intelligence · arxiv.org