arXiv Artificial Intelligence· Ignacy Stepka, Willa Potosnak, Kin G. Olivares, Artur Dubrawski·· 19 小时前AI 评分34
时间序列基础模型的尺度不变训练:ScaleIn 在 24 项对比中全部降低 MASE
Scale-Invariant Training for Time Series Foundation Models
AI 导读
研究指出,ReVIN 等仿射缩放方法在缩放后的目标上计算损失,会使每条序列的梯度被乘以 b^p,导致高尺度序列主导训练,作者称之为尺度污染训练(ScaleCon)。
来源:arXiv Artificial Intelligence · arxiv.org