arrow
返回

Diffusion-driven multi-modality medical image fusion

delete2025-02-11
delete0
PRE
AI
J
Jiantao Qu
D
Dongjin Huang *
Y
Yongsheng Shi
J
Jinhua Liu
W
Wen Tang
DOI:10.1007/s11517-025-03300-6delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
多模态医学图像融合(MMIF)技术利用不同模态的互补性,为临床实践提供更全面的诊断见解。现有的基于深度学习的方法通常专注于从单一模态中提取主要信息,而忽略了不同模态间信息分布的相关性,这导致图像细节和颜色信息的融合不足。为解决此问题,提出了一种扩散驱动的MMIF方法,用以利用多模态图像在潜在空间中的信息分布关系。为更好地保留不同模态的互补信息,建议采用一种局部与全局网络(LAGN)。此外,设计了一种损失策略,用于在扩散生成的图像、原始图像和融合图像之间建立稳健约束。该策略监督训练过程并防止融合图像中的信息损失。实验结果表明,所提出的方法在三个数据集(MRI/CT、MRI/PET和MRI/SPECT图像)上的无监督指标方面超越了当前最优的图像融合方法。所提出的方法成功捕捉了丰富的细节和颜色信息。此外,邀请了16名医生和医学生评估了该方法在辅助临床诊断和治疗中的有效性。
Keyword:
Medical image fusion
Diffusion
Local and global fusion
Deep learning

期刊

M
Medical and Biological Engineering and Computing
IF:
2.6
论文数:
311
被引数:
7.7K

机构

B
Bournemouth University
学者数:
2.7K
论文数: 3.1K
被引数: 3.5K
引用论文

引用论文

MRSCFusion: Joint Residual Swin Transformer and Multiscale CNN for Unsupervised Multimodal Medical Image Fusion
err2023-01-01
err4
PREAI
errXie, Xinyu; Zhang, Xiaozhi; Ye, Shengcheng; Xiong, Dongping; Ouyang, Lijun; Yang, Bin; Zhou, Hong; Wan, Yaping
err分享
err收藏
err分享
err收藏
err分享
err收藏
学者 查看更多内容