跳到正文
arXiv Artificial Intelligence· Daniel Mensing, Jan Kapar, Jochen G. Hirsch, Matthias G\"unther, Horst Hahn, Marvin N. Wright·· 19 小时前AI 评分22

多模态扩散模型在联合潜在空间中通过交叉注意力合成 MRI 与表格数据

Multimodal synthesis of MRI and tabular data with diffusion in a joint latent space via cross-attention

AI 导读

研究者提出一种多模态潜在扩散模型,通过交叉注意力在共享潜在空间中联合合成体积 MRI 与表格临床数据,先用变分自编码器融合两种模态,再分别用独立解码器重建。该框架在德国国家队列(NAKO)超 1 万名参与者的 MRI 与年龄、性别、身体测量、族裔等表格特征上评估,生成影像具备解剖合理性与对应身体成分,表格模态在标准指标上优于 CTGAN、与 TVAE 相当。

来源:arXiv Artificial Intelligence · arxiv.org