跳到正文
热点事件持续更新

FPRT推理蒸馏方法提出

1 篇报道1 个报道来源12 小时前更新

先了解这件事

AI 综述

2026年11月9日,arXiv Artificial Intelligence 刊出 Yijun Zhu 等作者的论文,提出失败画像与可达轨迹选择方法(FPRT),用于小模型的推理蒸馏。报道称,小模型在推理蒸馏中容易过拟合教师的输出分布,推理时一旦偏离训练数据便泛化较差。FPRT 的做法是:先对每个问题重复采样,刻画学生模型的错误率与错误一致性,据此区分不同失败模式;再按失败类型定制提示策略,生成教师候选;最后从候选中挑选“分歧点后最初几步最易被学生复现”的轨迹。作者称,其思路是有效训练数据应同时由学生失败之处与其现实可学之处共同决定。目前该工作处于论文发布阶段,报道未提及代码、数据或评测结果等后续进展。

AI 根据报道生成 · 12 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月9日
  1. arXiv Artificial Intelligence
    FPRT:面向推理蒸馏的失败画像与可达轨迹选择方法

    针对小模型在推理蒸馏中过拟合教师输出分布、推理时偏离训练数据导致泛化差的问题,研究者提出失败画像与可达轨迹选择方法 FPRT。该方法通过重复采样刻画学生模型在每个问题上的错误率与错误一致性,区分不同失败模式,再按失败类型定制提示策略生成教师候选,并从中挑选分歧点后最初几步最易被学生复现的轨迹。

本事件热度走势

可比范围当前
7
可比范围峰值
1011月9日 14:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。