arXiv Artificial Intelligence· Qiang Chen, Xiao Wang, Qingquan Yang, Hao Si, Zikang Yan, Guosheng Xu, Jin Tang·· 13 小时前AI 评分39
FusionCLIP:面向聚变等离子体诊断的多模态对比预训练框架
FusionCLIP: Multimodal Contrastive Pretraining for Fusion Plasma Diagnostics
AI 导读
FusionCLIP 多模态对比预训练框架通过时空稳定性选择保留有效视觉 token,并用时间查询编码器按观测时间戳整合异步诊断信号,再以对比学习对齐两种模态表示。
推荐理由模型分析
FusionCLIP 针对托卡马克视频与多变量诊断信号采样率不同、等离子体区域只占画面一部分的问题,用时空稳定性选择保留有效视觉 token,并按观测时间戳对齐异步诊断信号做对比预训练。作者在 1307 次 EAST 放电数据上,于破裂预测、ELM 分类和 H98 回归三个任务微调,报告综合得分 89.07%,比最佳通用预训练配置高 6.27 个百分点,比去掉该选择的域内对比预训练高 2.12 个百分点。这些是作者自建数据集上的结果,可作为聚变多模态表征学习的参考基线,尚不能外推为跨装置或在线控制效果。
来源:arXiv Artificial Intelligence · arxiv.org