分享
基于物理模型的级联生成对抗网络加速定量多参数磁共振成像.pdf
下载文档

ID:3118089

大小:2.15MB

页数:8页

格式:PDF

时间:2024-01-21

收藏 分享赚钱
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,汇文网负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。
网站客服:3074922707
基于 物理 模型 级联 生成 对抗 网络 加速 定量 参数 磁共振 成像
多回波多参数定量磁共振成像(qMRI)是一种定量MRI 1 的成像技术,它利用多回波图像获得多对比度图像来量化组织性质。与广泛使用的定性MRI有很大不同的是,定量MRI通过获得多对比度图像来重建参数图,如定量质子密度加权(PDW)、T1弛豫时间等组织参数映射、定量T2*Map 2,3 映射等。这种多参数图可以提供关于医学图像解剖结构特征的互补的定量信息,为特定的组织组成和微观结构提供更多的见解。然而,多参数MRI需要对解剖结构进行多次成像,通过多个翻转角(FA)、回声时间(TE)和重复时间(TR)产生不同的对比进行参数量化。对所有组织类型的时间信号演化的基于物理模型的级联生成对抗网络加速定量多参数磁共振成像基于物理模型的级联生成对抗网络加速定量多参数磁共振成像刘羽轩,楚智钦,张 煜南方医科大学生物医学工程学院/广东省医学图像处理重点实验室,广东 广州 510515Physicalmodel-basedcascadedgenerativeadversarialnetworksforacceleratingquantitative multi-parametric magnetic resonance imagingLIU Yuxuan,CHU Zhiqin,ZHANG YuSchool of Biomedical Engineering,Southern Medical University/Guangdong Provincial Key Laboratory of Medical Image Processing,Guangzhou 510515,China摘要:目的 探讨基于物理模型的级联生成对抗网络使用原始的多回波多线圈k空间数据加速定量多回波多参数磁共振成像方法的可行性分析与解释。方法 提出了一种基于物理模型的级联生成对抗网络,利用多域信息联合训练以及通过系统矩阵学习图像重建所需的关键参数,并自适应地优化k空间生成器和图像生成器结构来增强图像特征信息以获得高质量的重建图像。使用原始的多回波多线圈k数据加速多对比度多参数磁共振图像成像。提出了基于物理驱动的深度学习重建方法,通过建立系统矩阵函数而不是直接通过模型端到端训练的方式来增加模型的泛化能力和提高模型性能。结果 在整体回波图像质量评价方面,该模型在80例测试集上的重建图像的平均PSNR值为34.13,SSIM为0.965,NRMSE为0.114,大幅度优于本文的其它对比方法。在多对比度多参数图像重建方面,该模型评估的PDW、T1W以及T2*Map的PSNR分别为38.87、35.62和34.38,在定量上也显著优于其它对比方法,并拟合出更为清晰的大脑灰质、白质和脑脊液特征。除此以外,在重建时间相差不到10%的前提下与现有的方法相比,本研究的方法对PSNR、SSIM和NRMSE的指标提升最高可达到20%。结论 相比现有的方法,基于物理模型的级联生成对抗网络方法可以重建出更多的图像细节和特征,从而提高了图像的质量和准确性,并有望将其应用于临床诊疗流程中。关键词:加速磁共振成像;多对比度多参数;物理模型;级联生成对抗网络;多域联合学习Abstract:Objective To explore the feasibility and interpretation of physical model-based cascaded generative adversarialnetworks for accelerating quantitative multi-echo multi-parametric magnetic resonance imaging using raw multi-echo multi-coil k-space data.Methods A physical model-based cascaded generative adversarial network is proposed to enhance imagefeature information to obtain high-quality reconstructed images using joint training of multi-domain information and learningof key parameters required for image reconstruction through a system matrix and adaptively optimizing the k-space generatorand image generator structures.Raw multi-echo multi-coil k-space data are used to accelerate multi-contrast multi-parametricmagnetic resonance imaging.A physically driven deep learning reconstruction method is used to increase the generalizationcapability and improve the model performance by building a system matrix function instead of direct end-to-end training ofthe model.Results In terms of overall image quality,the proposed model achieved significant improvements compared toother methods.On an 80-case test set,the average PSNR value of the reconstructed images was 34.13,SSIM was 0.965,andNRMSE was 0.114.In terms of multi-contrast multi-parametric image reconstruction,the model achieved PSNR values of 38.87for PDW,35.62 for T1W,and 34.38 for T2*Map,which were significantly better than those of other methods for quantitativeevaluation.The model also produced clearer features of the brain gray matter,white matter,and cerebrospinal fluid.Furthermore,compared with the existing methods with a reconstruction time difference of less than 10%,the proposedmethod achieved the highest improvement of up to 20%in the metrics of PSNR,SSIM,and NRMSE.Conclusion Comparedwith other existing methods,the physical model-based cascaded generative adversarial networks can reconstruct more imagedetails and features,thus improving the quality and accuracy of the reconstructed images.Keywords:accelerated magnetic resonance imaging;multi-contrast and multi-parameter;physical model;cascaded generativeadversarial networks;multi-domain joint learning收稿日期:2023-03-15基金项目:国家自然科学基金(61971213)Supported by National Natural Science Foundation of China(61971213).作者简介:刘羽轩,在读硕士研究生,E-mail:L通信作者:张 煜,博士,博士生导师,教授,E-mail:doi 10.12122/j.issn.1673-4254.2023.08.18J South Med Univ,2023,43(8):1402-14091402要求可能导致过长的扫描时间,这将增加个体的不适感和在采集过程中产生运动伪影。因此,在保持良好图像质量的同时,开发一种加速多参数MRI成像的重建技术至关重要。从欠采样的k空间重建高质量图像是加速多对比度磁共振成像的主要策略,但这是一个没有解析解的逆问题。对于定量MRI,传统的定性MRI重建方法如并行成像 4-6(PI)和压缩感知 7-9(CS)可以获得多对比度图像,然后采用物理模型进行参数图估计。然而,当加速速率较高时,这些传统的方法会出现残留的伪影混叠现象。基于深度学习的MRI 重建方法已被提出 10,包括独立的去噪网络和解卷级联网络 11,12。基于卷积神经网络 13-23(CNNs)的方法被提出来去进一步增加加速因子和提高重建质量。遗憾的是,这些研究没有充分利用输入数据,特别是在处理小数据集的时候。例如,在一些研究中 11,14-20,23,输入数据只在图像域进行处理,而在频域和图像域同时进行处理可以获得更好的图像重建效果 13,21,22。此外,生成对抗网络(GANs)也被用于MRI重建工作 24-26,这些方法通过引入GAN来让输出的重建图像学习全采样图像的数据分布,但它们无法与同时涉及多域联合训练的方法相比。并且,使用相同的U-Net网络,特别是简单的池化和上采样层应用于频域和图像域信息,对频域恢复和图像重建并不是最合适的 27。另一方面,单一地使用像素差值类型的损失函数并不能充分约束重建损失以提高重建图像的质量,重建的质量并不只受到像素之间差值的影响,也与图像的对比度、亮度和相似性有关 28。除了网络结构设计问题外,数据的预处理和使用显得更为重要。例如,数据的不正确处理又会导致很多算法都只能止步于实验阶段,缺乏实时性也无法真正落地即实验与真实场景使用数据形式不一致。其次,医学图像数据的收集困难,通常只能从少量的样本中提取信息,但是,要想进行有效的深度学习训练,就必须收集大量的训练数据。通过结合物理驱动的深度学习重建方法,可以有效地解决k空间到图像域或者图像域之间的映射问题,从而提高模型的泛化能力,减少训练数据量,并且可以更好地学习和预测模型的最优参数。然而,在许多加速定量磁共振成像研究中 29-32,采样数据的选择和网络结构的设计仍然没有摆脱单线圈数据的使用和基于数据驱动处理的模式弊端。而我们都知道,实际使用大多都是多线圈数据,将传统重建方法中的物理原理和深度学习结合起来,能实现比基于数据驱动方式更好的结果。1 方法1.1 总体结构本研究所提出的框架由两个部分组成(图1)。第一部分是利用深度学习网络对多回波图像进行重建。然后利用重建后的多回波图像进行基于物理模型的最小二乘拟合以获得多对比度多参数图像。给定欠采样的 多 回 波 梯 度 回 波 序 列 k 空 间 数 据Y=Y1,Y2,YTCTCN,其 中N=NxNy,并 且YiCCN,其中i=1,2,T是第i个多线圈复值欠采样回波k空间数据,N表征每个线圈数据的像素数量以及C为总的线圈数,T是总的回波数。由于二维多回波多线圈数据的巨大内存消耗,本研究在读出方向(RO)中执行二维图像重建,在RO方向全采样而相位编码(PE)和空间相位编码(SPE)其他两个方向则处于欠采样的条件约束。Nz表示读出方向上的总层数,其中(s=1,2,Nz)。为了更好的描述多回波磁共振成像系统,本研究定义:图1 网络框架Fig.1 Overallarchitectureoftheproposedmethod.Y=AX+b()1其中XCTN表示重建的多回波图像,并且bCTCN表示高斯噪声,这有利于异常点的重建。操作算子A作用于系统矩阵并且通常可以被定义为:A=MFS()2A:CTNCTCN()3其中M=M1,M2,MT表示多回波采样矩阵,每个矩阵Mi0,1NN,F表示二维离散傅里叶变换,http:/www.j-J South Med Univ,2023,43(8):1402-14091403SCCNN表示线圈敏感度图。由于加速MRI重建是一个没有解析解的逆问题,需要对输出图像X进行正则化来限制解空间。通常,优化问题可以表述为:argminXAX-Y22+R(X)()4以R作为平衡数据保真度项和正则化项R(X)的权重。为了同时有效地处理实部和虚部数据,本研究将Y分为实部和虚部两个通道送入到本研究的重建网络中。本研究的网络包含生成器和判别器,它们迭代数为p(p=1,2,K)次,K为总的迭代次数,每次迭代后网络的性能都会得到提升。图2A展示了所提出的网络架构,我么可以将重建的回波图像进行后处理以得到多参数多对比度的图像例如PDW、T1W以及T2*Map。合成的方法如下所示:PDW=(T/2)i=1T/2Xi,T1W=(T/2)T/2+1TXi(5)XiCN表示重建的单个回波图像,T2*Map映射计算采用MDI方法 3。1.2 生成器生成器(G)由k空间生成器Gf、图像生成器Gi、线圈敏感度图生成器Gs和数据一致性层 12(DC)组成。一次迭代后,图像生成器的输出将被输送到上一个的k空间生成器中以提供额外的监督信息。k空间生成器、图像生成器和数据一致性层的每次迭代都共享相同的参数。生成器的优化过程如下所示:argminX,AX-Y22+X-G(X|)22(6)生成器的结构如图2B所示。1.2.1 k 空间生成器在 k 空间生成器中,卷积层由333卷积核、实例归一化(IN)层和校正线性操作单元(LReLU)组成。具体来说,最后一层只有111的卷积运算。由于输入的不是真正意义上的三维数据,而是多回波二维数据,因此仅在二维空间减少特征图像分辨率大小,而卷积操作仍然在三维空间中进行。k空间信号具有全局信息。为了避免特征空间中频域信息的丢失,本研究提出采用多尺度特征融合采样层(MSFS)来代替池化层和上采样层。此外,本研究使用预训练网络提供偏移校正的频域信息,以获得接近全采样频域信息的频域特征图。预训练的网络是U-Net。本研究只在第一次迭代网络中引入预训练网络。MSFS模块的详细结构如图2E 所示。其中,B为批处理大小,E为通道数,THW为三维特征图的维度。本研究定义第p个k空间生成器的输入为Yp,第p个k空间生成器的损失包含均方误差损失,可以表示为:Lfppixel=Gpf(Yp)-Ygt22(7)其中Gpf表示第p个k空间生成器,Ygt表示全采样的多回波k空间数据,为损失参数权重。1.2.2 图像生成器 图像生成器使用与k空间生成器相同的卷积、归一化和激活函数,但将池化层替换为卷积核为344步幅为2的卷积。本研究定义第p个图像生成器的输入为Xp,由图像域与频域之间的关系可得到:Xp=F-1Gpf(Yp)(8)其中F-1表示二维离散逆傅里叶变换。由于多回波二维图像丢失了三维空间结构信息,因此利用特征图通道残差块和空间特征表示模块(CSRB)增强特征信息是解决空间结构变化引起的结构信息丢失问题的可行方法。CSRB模块的详细结构如图2F所示。此外,本研究使用了绝对误差损失、均方误差损失、梯度差异损失和结构相似性损失 29 的组合损失函数来保持良好的图像细节。绝对误差损失L1和均方误差损失L2可以表征为像素误差损失。本研究定义第p个图像生成器的像素误差损失为:Lippixel=Gpi(Xp)-Xgt22+Gpi(Xp)-Xgt21(9)其中Gpi表示第p个图像生成器,和为损失参数权重,Xgt表示全采样的线圈组合后的多回波图像。在上式中,左边L2部分保证图像的鲁棒收敛性,右边L1部分防止重建图像的过度平滑。在Lippixel中加入Lipssim可以改善图像质量和细节 28。结构相似性损失是局部区域的损失,考虑了每个像素的局部邻域,它为位于前景和背景之间的过渡缓冲区(例如边界、精细结构)中的像素分配更高的权重,使得边界周围的损失更高,即使边界和前景的其余部分上的预测概率相同。通过这样的方式,结构相似性损失可以改变图像的对比度、亮度和相似性。卷积运算会带来图像边界信息的模糊和遗失,这点在图像重建中尤为明显。而利用梯度差异损失Lipgd恢复图像边界信息是缓解卷积运算对图像边界信息损失影响的一种有效方法。梯度差异损失可以表示为:Lipgd=Gpi(Xp)-Xgt22(10)表示梯度算子,为损失参数权重。总的来说,图像生成器的损失函数可以由上述3项损失函数相加而得到Lip=Lippixel+(1-Lipssim)+Lipgd,为结构相似性损失的损失参数权重。一次迭代中总的生成器损失可以表示为LpG=Lfppixel+Lip。由于图像生成器的输出被送入到数据一致性层中来保证输出图像的一致性,并且数据一致性层的输出是下一次网络迭代的输入,因此本研究可以通过以下公式来定义各个网络层之间的联系以及输入输出之间的作用关系:Yp+1=F(AHA+I)(AHY+Gpi(Xp)(11)J South Med Univ,2023,43(8):1402-1409http:/www.j-1404Y1=FAHY(12)实际上,在系统矩阵A中,线圈灵敏度图S也是未知的,需要进行估计。需要注意的是,由同一线圈获得的多回波数据具有相同的灵敏度图S。本研究采用U-Net作为线圈敏感度图生成器,其可以表示为:S=Gs()F-1YRSS(Gs()F-1Y)(13)其中,RSS表示平方求和开根运算符。1.3 判别器判别器(D)在距离域起作用,目的是区分真实的多回波图像和重建的多回波图像。图像生成器的每一次迭代输出Gpi(Xp)都会被送到迭代数相同的判别器Dp中,所有的判别器使用相同的参数。本研究假设生成器Gpi(Xp):Gpi(Xp)Xgt和判别器Dp(Xgt):Xgt0,1之间存在一个最小-最大策略。本研究还假设Gpi(Xp)是从潜在分布PGpi(Xp)Gpi(Xp)中获得的,而真实数据Xgt来自真实数据分布PXgtXgt。优化过程和判别器损失可以表述为:LpD=minGpimaxDpEXgtPXgtXgtlogDp(Xgt)+EGpi(Xp)PGpi(Xp)Gpi(Xp)log(1-Dp(Gpi(Xp)(14)判别器采用PatchGAN结构 33。直接端到端映射将影响多回波图像重建质量。因此,结合来自迭代网络的每个损失,可以有效地提取潜在信息,提高模型的表达能力。为了让迭代网络的每个损失更加符合模型的训练过程,本研究基于指数衰减的模型 12,13 的总损失可以表示为:Ltotal=pKep-Kmul(LpG+LpD)(15)其中mul表示逐元素相乘算子。1.4 统计学方法使用 python stats 库中的 t 检验来计算 P 值,当P0.05时认为差异有统计学意义。2 结果2.1 数据集本研究使用了三维MULTIPLEX(MTP)获得的多回波多线圈内部数据,这是最近提出的一种用于多参数脑映射的新序列 34。特别的是,MTP是一种具有双重复时间(TR)、双翻转角度(FA)和多回波设计的梯度回波脉冲序列(GRE),以提供不同的对比度。MTP采集在3T扫描仪(890)上采用32通道头线圈,使用以下参数:FA1/FA2=4/16,每个翻转角获取68个回波同时回波时间(TE)=3.920.8ms,两个TR的值都为34.5ms,矩阵大小为25625680,体素大小为112 mm3。本研究可以灵活的设计MTP序列的参数比如TR,TE,图2 基于物理模型的级联的生成对抗网络的多回波磁共振重建框架图Fig.2 The physical model-based framework for accelerating multi-echo MRI reconstruction with cascaded generative adversarialnetworks.Where A-D represent the overall network framework,the complete generator structure,the K-space and image generatorandE,FdenotetheMSFSandCSRBmoduleseparatelyBCDEhttp:/www.j-J South Med Univ,2023,43(8):1402-1409AF1405FA,层厚以及FOV。数据集包含20名受试者,共计284个回波,每一个全采样受试者的中心40个切片,包含相应的脑组织,16/2/2名受试者(640/80/80)切片作为训练、验证和测试,一个完整的受试者的全采样图像所需时间为14min。2.2 实验设置本研究对比了传统方法ESPIRIT 35,级联CNN网络(DC-UNet)18,生成对抗网络 27 和本研究设计的方法(ME-DCGAN)。所有模型都在PyTorch中训练,使用NVIDIAGeForceRTX3090显卡和24GBGPU内存,使用Adam优化器,参数1=0.5以及2=0.999,学习率为1e-3,共训练50次,批处理大小为1。所有对比方法均使用它们的默认参数设置重新训练。评价指标包括峰值信噪比(PSNR)、结构相似指数(SSIM)和归一化均方根误差(NRMSE)。本研究应用权重变量,的权值为5,1000,1000,0.001,1,判别器损失函数的权值设为0.1。增加展开级联迭代次数会增加计算成本,初步实验表明,当迭代次数超过3次时,重建效果不明显。因此,本研究使用最大迭代次数p为3来训练所提出的模型。2.3 实验结果对所有重建的多回波图像和多对比度图像而言,ME-DCGAN模型的PSNR和SSIM最高,NRMSE最低,与传统ESPIRIT方法相比,重建指标PSNR、SSIM和NRMSE的提升接近20%,与基于深度学习的对比方法DC-UNet 18 和Shaul 27 相比,其指标也能提升5%左右(表1)。本文中所有的方法均使用python stats库中的t检验来计算 P值,计算结果表明重建的多回波图像和拟合的多参数图像与全采样的图像相比均具有统计学意义(P0.05)。对于重建后的多回波图像,对比方法在拟合过程中均使用相同的物理模型获取多对比度多参数图像。因此,对于多对比度多参数图像,本研究的方法在PDW和T1W具有最高的PSNR。尽管T2*Map的PSNR较低,但本研究的方法仍然在定量上优于其它的对比方法,并且本研究的方法也重建出更为清晰的大脑灰质、白质和脑脊液特征。虽然DC-UNet通过级联多个图像域U-Net去噪网络恢复了较为精确的图像细节,但是只需级联一次的ME-DCGAN网络比级联三次的DC-UNet具有更好的图像细节和特征恢复性能,更高的重建指标以及更鲁棒的实验过程与结果分析。这表明了在模型参数量大致相等的情况下混合域学习具有比单域学习更大的优越性以及对图像细节的敏感性。本研究方法的重建指标对比Shaul等 27 的工作表明使用相同的网络结构在频域恢复和图像重建中并不是最合适的。由于频域与图像域的差异,我们需要设计不同的网络结构来特具化地恢复频域与图像域的信息。实验采用5倍加速度下的二维变分密度采样。在5倍加速条件下,基础的采样时间缩短为172 s。由于不同的方法迭代时间不一致,而ESPIRIT作为传统的压缩感知方法,重建所需时间会大于基于深度学习的方法,而对物理模型的拟合过程也需要少量的时间。总的来说,本研究的方法在重建时间不超过10%的前提下能显著优于其它对比方法。由于篇幅限制,本研究只展示了2个回波,以及展示了PDW、T1W和定量T2*Map映射下的多对比度图像(图3、4)。综上所述,ME-DCGAN在迭代次数p=3的条件下具有最佳的图像细节恢复表现。虽然本研究的方法实现了具有竞争力的重建性能,但仍然存在以下问题。首先,组合损失函数的最优权值难以确定。其次,由于物理模型假设“完美”图像质量,容易受到欠采样伪影的影响。表2中的指标均采用了与表1相同的P值计算方法(P0.05)。因此通过基于物理模型的最小二乘拟合并不是获得多对比度图像的最佳方法。我们可以利用神经网络来逼近最优参数映射。最后,由于我们使用小的内部数据集,因此需要在更多的数据集上验证方法的有效性。而在本研究对不同模块和损失函数评估的消融实验中,本研究将通过实验结果与分析来评估关键组件的有效性。由于篇幅限制,消融实验将在迭代次数p=1并且5倍加速度下的二维变分密度采样条件下比较。表2展示了引入的模块和损失函数对重建性能的影响。表2表明添加不同损失和不同结构模块均能有效的提高多回波图像的重建质量,并且从指标上的差距可知MSFS和CSRB模块对改善多回波图像重建质量具有最大的帮助。不仅如此,没有任何额外网络结构和损失函数的实验结果也已经超越了DC-UNet和Shaul等的方法,并且随着相应结构和损失函数的增加,本研究的方法均能获得更好的重建指标与实验表现。3 讨论近年来,卷积神经网络、生成对抗网络等技术被应用于磁共振重建领域,然而,目前深度学习的重建方法面临许多问题,比如输入数据利用不充分 11,14-20,23-26、网络结构特异性较差27、数据使用形式不符合临床要求11,13-27,29-32、损失函数过于简单导致重建图像的质量受到影响11-24,26,27,29-31以及数据驱动导致模型拟合能力差29-32 等问题。对此,本研究提出了一种基于物理模型的级联生成对抗网络的加速定量磁共振成像方法。在该方法中,针对输入数据只在图像域进行处理的问题,本研究提出了频域、图像域、距离域多域联合学习方法;针对网络结构特异性较差的问题,本研究自适应地优化 k 空间生成器和图像生成器结构来增强图像特J South Med Univ,2023,43(8):1402-1409http:/www.j-1406征信息以获得高质量的重建图像;针对实时性和数据的不正确处理导致的实验与真实场景使用数据形式不一致问题,本研究使用原始的多回波多线圈数据而不是将线圈组合后的数据去训练来加速多对比度多参数磁共振图像重建;针对小数据集和没有使用磁共振物理原理导致的模型拟合能力差的问题,本研究提出了基于物理驱动的深度学习重建方法,通过建立系统矩阵函数而不是直接通过模型端到端训练的方式来增加模型的泛化能力和提高模型性能。总的而言,本研究的贡献如下:本研究使用多回波梯度回波脉冲序列(GRE)信号作为图3 在多回波图像上的5倍变分密度加速下的视觉结果Fig.3 Resultsof5variabledensityaccelerationofthemulti-echoimages.图4 在多参数图像上的5倍变分密度加速下的视觉结果Fig.4 Resultsof5variabledensityaccelerationofthemulti-parametircmaps.ME-DCGAN ME-DCGAN ME-DCGANESPIRITDC-UNetShaul et al.p=1p=2p=3Fully-sampledME-DCGAN ME-DCGAN ME-DCGANESPIRITDC-UNetShaul et al.p=1p=2p=3Fully-sampled0.150-0.15Difference0.150-0.15Differencehttp:/www.j-J South Med Univ,2023,43(8):1402-14091407输入,目的是重建多回波图像并生成多对比度多参数图像,这极大地扩展了多回波 GRE 在加速磁共振成像上的理论研究基础和应用范围。并且本研究提出了一种基于物理模型的级联生成对抗网络,该网络利用多域信息联合训练以及通过系统矩阵学习图像重建所需的关键参数,并自适应地优化 k 空间生成器和图像生成器结构来增强图像特征信息以获得高质量的重建图像。此外,本研究使用原始的多回波多线圈数据而不是将线圈组合后的数据去训练,以确保实验与真实场景使用数据形式一致。最后,本研究提出了一种组合损失函数,并分配适当的损失函数权重以提高图像整体的重建质量。但是目前基于深度学习的重建方法仍然面临相当大的考验。例如,目前的深度学习方法缺少整体的优化框架,分阶段优化会导致的数据真实性问题。此外,医学图像的标注也是一个严重制约深度学习在核磁共振重建中发展的一个重大因素,所以无监督学习的研究和发展显得格外重要。随着技术的发展,可解释性对于核磁共振重建的成功至关重要,而如何有效地利用深度学习技术来改善其可解释性却仍然是一个棘手的问题,因此,有必要加强相关的研究。虽然,近几年深度学习在核磁共振重建方法的研究中一直都是热点研究问题,但临床上使用最广泛的还是传统的并行成像方法。深度学习的重建方法在临床应用方面还有待进一步研究,以实现深度学习重建方法在核磁共振扫描仪产品上的广泛落地应用。在未来,我们将充分考虑现有的问题,并且根据其自身特性以及使用场景做了定制,以期望可以推动临床影像的发展。参考文献:1 Lauterbur PC.Image formation by induced local interactions.Examples employing nuclear magnetic resonance.1973 J .ClinOrthopRelatRes,1989(244):3-6.2 Welsch GH,Hennig FF,Krinner S,et al.T2 and T2*Mapping J .CurRadiolRep,2014,2:1-9.3 Ye Y,Lyu J,Sun W,et al.A multi-dimensional integration(MDI)strategy for MR T2*mapping J .NMR Biomed,2021,34(7):e4529.4 Lustig M,Pauly JM.SPIRiT:Iterative self-consistent parallelimaging reconstruction from arbitrary k-space J .Magn Reson Med,2010,64(2):457-71.5 Knoll F,Hammernik K,Zhang C,et al.Deep-learning methods forparallel magnetic resonance imaging reconstruction:a survey of the表1 在重建的多回波图像和多对比度图像中进行不同方法实验的比较Tab.1 Comparisonsofdifferentmethodsforreconstructingmulti-echoimagesandmulti-contrastimagesMethodEvaluation metrics:PSNR/SSIM/NRMSE MSFSCSRBPre-NetlgdlssimPSNR32.2732.5832.8833.1333.2833.34SSIM0.9480.9500.9520.9530.9540.956NRMSE0.1330.1320.1300.1280.1270.125表2 在重建的多回波图像中进行消融实验的比较Tab.2 Ablationexperimentsofthereconstructedmulti-echoimagesusingdifferentmethodsJ South Med Univ,2023,43(8):1402-1409http:/www.j-Metrics outputZero-filledESPIRITDC-UNet(P=3)Shaul et al.MEDCGAN(P=1)MEDCGAN(P=2)MEDCGAN(P=3)PSNRRec25.8128.8431.7532.1533.3433.8634.13PDW0.9020.9440.9700.9610.9730.9780.983T2*18.7327.1429.5931.4433.2733.6634.48T1W26.7730.8233.3933.5834.3634.6435.62SSIMRec0.8500.9040.9430.9480.9560.9620.965PDW0.9020.9440.9700.9610.9730.9780.983T2*0.6700.8040.8430.8570.8730.8820.901T1W0.8690.9240.9570.9540.9640.9680.972NRMSERec0.2390.2110.1700.1350.1250.1180.114PDW0.1870.1210.0840.0910.0790.0730.062T2*0.5080.2110.1800.1720.1420.1220.107T1W0.1850.1250.0860.0840.0770.0750.066TIME(s)Rec172224192177180188196PDW175 s227 s195 s180 s183 s191 s199 sT2*177229197182185193201T1W1752271951801831911991408current approaches,trends,and issues J .IEEE Signal Process Mag,2020,37(1):128-40.6 Griswold MA,Jakob PM,Heidemann RM,et al.Generalizedautocalibrating partially parallel acquisitions(GRAPPA)J .MagnResonMed,2002,47(6):1202-10.7 Saiprasad R,Yoram B.MR image reconstruction from highlyundersampled k-space data by dictionary learning J .IEEE TransMedImaging,2011,30(5):1028-41.8 Lustig M,Donoho D,Pauly JM.Sparse MRI:the application ofcompressed sensing for rapid MR imaging J .Magn Reson Med,2007,58(6):1182-95.9 Tobias BK,Martin U,Jens F.Undersampled radial MRI withmultiple coils.Iterative image reconstruction using a total variationconstraint J .MagnResonMed,2007,57(6):1086-98.10 Wang S,Su Z,Ying L,et al.Accelerating magnetic resonanceimaging via deep learningC/Proc IEEE Int Symp BiomedImaging,2016.11 YangY,Sun J,Li H,et al.ADMM-CSNet:a deep learning approachfor image compressive sensing J .IEEE Trans Pattern Anal MachInt

此文档下载收益归作者所有

下载文档
你可能关注的文档
收起
展开