医学图像配准深度学习方法与应用研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:adige
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
医学图像配准是一个复杂的具有不适定性的科学问题。如何设计和实现高精度、高效率的配准算法是目前临床医学影像辅助诊疗中亟待解决的难题。现代医学成像技术的发展使得图像更加复杂和多样化,传统的图像配准算法在配准的准确度、效率、普适性和鲁棒性等方面表现出一定的局限性。最近的研究发现,深度学习方法可以通过大样本训练学习,建立高效、准确的医学图像配准模型。本文针对现有医学图像配准难点,系统深入地研究了深度学习配准方法。提出了端到端无监督学习的仿射和弹性级联配准网络结构。在弹性配准算法上,提出了形变场一致性和形变场先验分布等正则化方法。结合临床需求,已将提出的深度学习配准算法成功应用到纵向脑图谱构建和分析、新冠肺炎感染区域分布及其纵向演变规律、肺结节分布等多模态影像分析中,取得了满意的效果。主要研究成果如下:1.无监督深度学习仿射和弹性级联配准网络:在对实时性要求较高的影像导航或影像辅助介入的应用中,一般需要先进行全局仿射配准,再进行局部弹性配准。目前配准算法需迭代优化,配准过程时间长,不能满足临床实时性要求。本文提出了一种两阶段无监督深度学习仿射和弹性级联配准深度网络:第一阶段的深度网络用来学习输出图像级的全局仿射变换参数。第二阶段网络学习输出体素级的局部形变场,其输入为固定图像和第一阶段输出的仿射变换后浮动图像。两阶段配准网络分别通过最大化输入图像的全局和局部归一化相关系数进行无监督的端到端联合训练,无需医生勾画解剖学轮廓和形变场金标准。脑部MRI配准实验表明,训练好的两阶段配准网络可直接同时进行图像仿射和形变配准,无需迭代,配准耗时小于1秒。该方法在LPBA40,IBSR18,CUMC12和MGH10四个数据集中的准确度Dice分别达到0.71±0.10,0.65±0.23,0.47±0.21和0.44±0.19。2.无监督深度学习对称循环一致性配准网络:在临床肿瘤自适应放疗中,需要通过图像配准技术将治疗时图像和治疗前的计划CT进行配准,并通过形变场对放疗靶区和剂量分布进行演化和评估。该过程要求形变场是可逆、光滑、双向一致的,可通过微分同胚形变配准实现,但计算量大、耗时长。本文提出了无监督深度学习对称循环一致性配准网络,即双向形变一致性和循环形变一致性正则方法。除图像强度相似性和形变场拓扑一致性正则项外,在训练损失函数中增加图像对间的形变逆一致性正则项和图像组间的形变循环一致性正则项。首先,通过双向配准引入待配准图像对的逆一致性;然后,将一致性推广到2幅以上的图像组,使得成对一致性和组内一致性都可以很好地应用到该配准网络中。所提出的分阶段优化训练策略在不引入任何额外网络参数和计算复杂度的情况下,得到了鲁棒的配准结果,在改变待配准图像顺序后也能产生一致的形变结果。与目前最先进的传统配准算法相比,该方法达到了相似的精度,并在精度和形变一致性方面都优于没有一致性约束的深度学习网络,保证了非线性配准中形变场的可逆性、光滑性和拓扑正确性。在LPBA40,IBSR18,CUMC12和MGH10四个数据集中准确性Dice分别达到0.70±0.05,0.47±0.10,0.48±0.09和0.51±0.11,一致性Dice大于0.97,一致性距离均值为0.25mm。形变场折叠数量和千分比达到1204/0.17‰。3.基于形变场先验投影图像的多级配准框架:对不同个体的图像或者同一个体存在较大的呼吸运动的图像配准研究发现,解剖形态差距较大的图像进行配准较为困难,如肺部4D-CT图像的吸气和呼气时刻的两幅图像的配准。在图谱的构建过程中,对具有不同形态差别的图像进行配准需要鲁棒的配准算法,然而传统算法需要进行调参,对不同应用场景和图像进行迭代优化计算,大部分深度学习的算法需要进行超参数的设置,网络不具有通用性,不能使用同一个网络处理形态差距不同的图像。本文提出了基于形变场先验投影图像的多级配准框架,通过高维形变场统计分布先验模型生成先验图像来增强弹性配准的鲁棒性和精度。首先通过高维形变场分析估计形变场的先验分布,然后利用该先验分布分别生成与两个输入图像相似的中间先验图像,使得任意两个图像的配准能够以两个中间图像为桥梁,将输入图像对的配准转换成采用可逆一致的深度配准网络分别配准对应的中间生成图像和输入图像。由于中间图像在形状上和对应输入图像更为相似,该方法可以达到较高的准确性和较好的一致性,尤其是在形状外观差别较大的输入图像之间,能够产生平滑一致的形变场。实验结果表明,该方法的准确性Dice为0.74±0.05,一致性Dice为0.94±0.02,一致性距离为0.21±0.01mm,形变场折叠度为0.15‰。4.基于形变场先验知识的混合监督配准网络:为了将形变场的统计先验约束融合到配准网络的训练中,本文提出了基于形变场先验知识的混合监督配准网络。该方法同样适用于呼吸运动产生的大形变的情况和图谱构建任务。具体策略包括:(1)形变场先验变分编解码数据增强与配准网络训练策略。从一组由微分同胚配准方法Sy N生成的有效形变,通过训练变分编解码网络,得到形变场在隐空间的流形,然后对隐空间进行统计采样,并将解码器重构后的形变和对应形变后的图像作为金标准,对配准网络进行有监督训练。混合监督变分编解码训练策略交替使用了这种有监督和前述无监督深度学习对称循环一致性学习策略,在网络训练中进一步考虑了形变场平滑性约束和逆一致性约束。(2)集成形变场核主成分分析先验的小波多分辨率配准网络。在网络结构上提出在每个分辨率层次上进行简单卷积的多分辨率配准网络。先在最低分辨率上计算形变场,再在高的分辨率上逐级细化。形变场的先验分布则以核主成分分析的非线性建模方法应用在低分辨率的形变场约束和学习中,同时利用多分辨小波分解的图像特征作为输入,不仅保留低频图像形状,而且保持丰富的高频特征。实验结果表明,所提出的混合监督的训练策略和采用新的先验分布约束学习的多分辨配准网络在配准精度、一致性和拓扑正确性方面都有较好的表现。该方法的准确性Dice为0.75±0.05,豪斯多夫距离为2.0±0.6mm,一致性距离为0.20±0.01mm,形变场折叠度为0.16‰。5.创新性配准应用:将配准技术应用于医学影像分析,包括采用基于形变场小波主成分分析先验投影图像的多级配准框架,进行基于核磁图像的纵向脑图谱的构建和分析,以及基于CT图像的新冠肺炎感染区域分布及其纵向演变分析,和基于CT图像的肺结节分布分析。将大量不同个体或不同时间点的图像配准到模板图像空间,获得不同群组的发育或疾病分布信息特征,可一目了然地看到器官组织发育、疾病进展与治疗过程中的变化结果。可为疾病的早期评估、病变的严重程度预测等计算机辅助检测和诊断提供先验知识,同时为医生提供可视化参考的评估方法。
其他文献
2021年普利策小说奖的获得者路易丝·厄德里克(Louise Erdrich)是一位杰出而高产的美国印第安作家。她早期的“家族传奇四部曲”《爱药》(1984)、《甜菜女王》(1986)、《痕迹》(1988)和《宾果宫殿》(1994)引发了学界的广泛关注,相继出现了对这四部小说在后殖民、叙事、文化、性别与生态等方面的多项研究。然而,大多数已有研究更多关注的是文本的表象,而对小说中印第安身份的成因却缺
学位
预制叠合剪力墙结构在我国尚处推广应用阶段,适用于工业化生产和流程化施工,符合我国装配建筑产业升级的需要。改善和提升预制叠合剪力墙的抗震性能以适应我国大部分疆域地震多发的基本国情和城镇化发展对高层建筑的需求,准确计算由不同批次混凝土浇筑而成的预制叠合剪力墙收缩徐变效应是确保这种结构体系满足正常使用要求的重要条件。因此,本文围绕预制叠合剪力墙抗震性能提升和收缩徐变效应研究,利用试验、数值模拟和理论分析
学位
随着经济发展及金融科技与消费贷款的融合,消费贷款规模逐步攀升,与此同时,保险公司凭借自身风险管控优势介入消费贷款领域。保证保险作为融资增信和转嫁信用风险的有效工具,实现了信贷业与保险业的交融互通。保证保险的加入,将单一的贷款利率定价拓展至贷款利率与保费率的双重定价。然而,消费贷款及其保证保险业务发展至今,尚未形成标准统一的定价体系,因此,保证保险消费贷款定价研究具有现实的必要性和紧迫性。本文围绕保
学位
高精度微结构光学元件在航空航天、光电成像、太阳能光伏和现代医疗等领域应用日趋广泛,对于高效率、高精度、低成本、批量制备微结构光学元件的技术需求与日俱增,其中,模压成型技术是一种高效、高精度的批量生产技术。传统热压成型采用“等温成型”的方式,成型之前需将模具和玻璃同时加热到高温状态,成型完成后两者还需同时冷却,每成型一个工件均需完成一次上述流程,带来了模压周期长的弊端。另外,对于制备具有大面积复杂微
学位
随着现代电力电子技术的发展以及新能源发电技术的广泛应用,直流配电网可灵活衔接现有配电网络、兼容多类型直流发用电装置,是未来配电网络的发展趋势。然而,大规模可再生能源发电装置的接入、多类型能源的互补与就地消纳、装置间的复杂交互影响,对直流配电网的高效、可靠、稳定运行构成严峻挑战。在此背景下,需要对大规模电力电子装置接入直流配电网的协调控制和多类型电力电子装置的交互影响稳定性进行研究。在协调运行控制方
学位
磨抛机器人具有加工精度高、工件一致性好、作业效率高等特点,已广泛应用于航空航天、轨道交通、海洋工程、汽车电子等高端装备复杂工件的表面处理中,使工人远离恶劣危险的环境,是“机器换人”最具代表性的应用场景。基于示教的磨抛机器人面临着工件结构形状复杂、规格尺寸多样、工艺工序丰富、加工高速高精带来的挑战。提升机器人磨抛作业水平需要开发兼具精度和柔性的机器人控制系统,其研发面临两大技术难题:(1)模型失配与
学位
颗粒增强金属基复合材料由于具有较高的比强度、比模量和耐磨损等性能,因而在航空、航天和汽车工业等领域中具有广阔的应用前景。已有制备颗粒增强金属基复合材料的工艺有数十种以上,但能同时获得较高强度、韧性和界面结合性的却很少。采取优化制备工艺,合理控制增强颗粒相诸多特征如体积分数、尺寸和分布等,是获得颗粒增强金属基复合材料优越力学性能的重要研究方向。此外,随着结构零部件在实际工程应用中承受载荷的复杂化和多
学位
行驶状态下的车门异常振动会极大影响客户对于汽车质量的评价。降低车门振动水平对于设计高品质的车门系统,改善车辆乘坐舒适性具有重要意义。车门减振设计的关键在于对车门振动响应的准确预测及关键设计参数的优化。论文以某SUV在搓衣板路面行驶时出现的车门异常振动问题为研究对象,采用试验和仿真分析相结合的方法对车门异常振动问题的原因进行分析,确定了车门振动传递过程中的关键部件为底盘橡胶衬套、车门密封胶条和车门子
学位
图像是人与自然界交互的主要信息,而图像在获取过程中不可避免地会受到噪声污染。图像去噪不仅有利于改善视觉效果,还有助于提升后续高层视觉任务的处理表现,例如图像分类、目标检测和图像分割等。同时,图像去噪作为图像处理中一个典型且基本的反问题,其理论方法也常常适用并被迁移到其它图像恢复应用当中,包括图像去模糊、图像超分辨率和压缩感知等。图像去噪是一个具有广泛实用价值和重要理论意义的科学研究课题。图像去噪的
学位
Cu基纳米晶材料具有优异的性能及一系列新奇的变形行为,如超塑性、孪生趋势尺寸效应和晶界弱化等,引起了科研从业者的广泛关注。粗晶Cu材料在大塑性变形中经历了剧烈的晶粒细化过程,在极小的尺寸范围内(小于几十纳米),材料的强度和变形方式具有反晶粒尺寸效应。建立变形条件(如温度、应变量及应变速率)、合金化元素和层错能的联系有助于加深对内在变形机制的认识与理解。另一方面,随着晶粒尺寸不断减小,晶界的比例和能
学位