跳到正文
arXiv Artificial Intelligence· Bui Van Hung, Hoang-Son Vo, Mai Duc Minh Huy, Dang Thanh Vu, Soo-Hyung Kim·· 19 小时前AI 评分22

MultiFlow:基于刺激感知源流匹配的视觉驱动多模态 fMRI 编码

MultiFlow: Vision-Driven Multimodal fMRI Encoding via Stimulus-Informed Source Flow Matching

AI 导读

MultiFlow 是一个基于条件流匹配(CFM)的生成式 fMRI 编码框架,提出 Stimulus-Informed Source Flow Matching(SISFM),用可学习时间卷积塑造源分布均值、方差头收缩其尺度以缩短传输路径,并以 DiT-X 解码器参数化速度场,融合十个冻结的视觉、音频、语言和视听骨干网络及按被试的 Yeo 网络头。

来源:arXiv Artificial Intelligence · arxiv.org