跳到正文
arXiv Artificial Intelligence· Oriol Juan Sabater, Alex Ferrando de las Morenas, Pau Rodr\'iguez, Xavier Suau·· 19 小时前AI 评分31

Gemma4-12B-it 研究:多模态与加减运算共享同一潜在数字几何

Beyond the Readout: A Latent Numerical Frame Shared Across Modality and Operation

AI 导读

研究用因果干预探测 Gemma4-12B-it 的残差流,发现文本与图像、加法与减法四种条件下数字并非沿相同方向编码:把文本子空间复用到同运算的图像上仅恢复 53.2% 的因果效应,经一次旋转与重缩放映射后恢复率升至 91.4%,说明各条件共享同一几何、只是坐标系不同。

来源:arXiv Artificial Intelligence · arxiv.org