LatentMoE专家几何与逐层容量分配研究

2026年10月14日，arXiv人工智能板块出现Yaoxiang Wang等人的论文，提出LatentMoE方法。该工作将专家计算移入低维空间，使专家输入维度与中间宽度成为显式设计选项。论文证明，专家的局部Jacobian秩受这两个维度共同约束；在单专家参数量固定时，使二者均衡可最大化秩上限。报道同时提及该方法涉及逐层容量分配，但未给出具体分配规则或实验结果的细节。目前该事件仅有这一篇报道，尚无后续跟进或相互矛盾的说法。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。