基于生成模型的医学图像配准方法研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:zly13631743
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像配准是医学图像分析中的关键问题。图像配准可以用来建立不同图像(例如不同样本的图像,或同一样本不同时间点的图像)之间的空间对应关系,以完成图像的横向(不同个体)和纵向(不同时间点)比较分析。传统方法将图像配准看待为一个优化问题,其目标是得到稠密的形变场,使得经过形变后的浮动图像和目标图像的相似度达到最大化。为了得到合理的形变场,常常在优化中引入对形变场的平滑约束(例如形变场梯度的L1或者L2范数)。近期,基于深度学习的配准算法因为其在运算效率方面的优势,获得了极大的关注。在实际的临床应用中,图像配准任务是极具挑战的,比如具有较大形变的同模态图像配准,以及手术导航中跨模态配准等任务。现有的配准方法(包括基于传统迭代优化和基于深度学习)往往不能直接应用便得到令人满意的结果。虽然可以考虑针对不同任务对图像之间的相似性测度、形变场的约束项、优化方式等加以改进,但是在面对复杂生理解剖结构、不同图像模态、信息不匹配及含噪声图像、结构和表观差异大等图像配准问题时,现有算法的性能仍然是非常有限的。针对以上挑战,本文提出了基于生成模型的配准方法,通过生成图像或者形变场来简化配准的难度,解决了临床复杂数据在配准中精度和鲁棒性下降的问题。本文提及的生成模型特指图像域和形变场域的生成模型。按照获得生成模型的难易程度,本文先在图像域中,探索使用生成模型完成了形态结构简化、跨模态转换、图像修复等任务;更进一步,本文在形变场域中探索使用生成模型直接从输入的不同图像中映射出其背后的形变场。具体的研究内容如下:1.本文提出了拓扑简化生成模型用以简化复杂结构的配准问题。结构复杂的待配准图像之间,往往很难找到具有空间对应的结构。为了解决这个挑战,本文提出了使用生成模型实现对复杂结构的拓扑简化。这里的简化是指对复杂的结构表面进行平滑,得到一系列结构简化程度不同的图像。这样,在完成配准时候可以通过这一系列的结构简化的图像来构建浮动图像到目标图像的连接桥梁。本文在五个成人大脑MR图像的公开数据集上对所提出方法进行了验证,与传统配准方法相比,在大脑内外皮层的配准精度上有显著的提升。2.本文提出了跨模态生成模型用以提高不同模态图像的配准精度。因为难以找到合适的相似性度量,不同模态的图像配准精度和鲁棒性都有待进一步提高。虽然已经有包括互信息、互相关系数在内的多种不同模态图像相似性测度被提出,但是在实际应用过程中,仍然有不少失效的情况。究其原因,是不同模态之间相似性关系的复杂性。考虑全局信息或局部信息的度量方式难以鲁棒统一地衡量不同模态图像之间的关联度。相反,在同模态图像的相似性测度中,因为图像之间的匹配度相对直观,很多测度(均方误差等)的有效性已经得到验证。考虑到以上问题和事实,本文提出跨模态图像生成模型来完成从源模态图像到目标模态图像的预测合成,使得不同模态图像配准问题简化为同模态图像配准问题。本文提出的基于跨模态生成模型的配准方法,可以较现有算法得到更鲁棒和准确的配准结果。3.本文提出了图像修复生成模型用以提高信息不匹配图像之间的配准精度。信息不匹配图像之间的配准在手术导航中经常遇到:因为有手术器械或者植入假体的存在,使得术中术前图像之间的信息不匹配。因不匹配区域的大小而异,配准精度会在全局或者局部受到影响。考虑到此问题,本文提出了通过对图像修复生成模型自动地生成信息匹配的图像,进而可以通过现有的配准方法基于生成后的图像进行配准。本文提出的基于图像修复生成模型的配准方法较现有的配准方法可以显著地提高在关键区域的配准精度。4.本文提出了形变场生成模型来完成结构复杂性大和差异大的图像配准。结构复杂性大和差异性大的图像配准涉及到了相对复杂和较大的形变场估计的问题。现有算法在处理这样的配准问题往往会因为优化的形变场过于复杂而难以得到准确的结果。考虑到该局限性,本文提出了形变场生成模型用以完成结构复杂性大和差异性大的图像配准。本文提出的基于形变场生成模型的配准方法在配准的精度和形变场的平滑度上都较现有配准方法有显著的提升。本文从直观的图像域的生成模型到形变场域的生成模型进行了论述,并在图像域提出了三个生成模型,分别完成了图像的拓扑简化,跨模态的合成,以及图像的修复;在形变场域,提出了形变场生成模型,完成了从图像到形变场的直接估计。本文最后总结了生成模型在医学图像配准中的价值和潜力,并对目前工作的局限性展开了讨论,最后提出了对于今后工作的设想。
其他文献
超短脉冲作为人类创造的时间最短的事件,脉宽可以达到飞秒(fs,10-15s)量级,为很多领域提供了最精确的测量手段。这些高精度的测量,对超短脉冲的稳定性、脉宽等特性有严格要求,需要对其进行精确调控,这就要求人们深入理解超短脉冲的产生和演化机制,所以超短脉冲的腔内演化一直是超快光学领域的研究热点。最近兴起色散傅里叶变换技术(DFT),虽然可以单次探测超短脉冲的光谱,但不能从时间角度还原脉冲信息。在频
学位
星系团处于宇宙大尺度结构的节点,在天体物理学中有重要的研究价值。其总引力质量和空间分布信息可用于宇宙学和引力理论研究并约束其模型的参数分布。此外,星系团也为人们研究星系的形成和演化、星系与星系际介质(ICM)和活动星系核(AGN)之间的相互作用提供了一个理想环境。尽管星系团结构的形成与演化主要受引力影响,非引力过程(如AGN反馈,辐射冷却等)在其中也不可忽略。理解此过程在星系团演化中的作用及其对I
学位
随着人工智能的快速发展,传统的Si电子芯片逐渐无法满足对海量数据进行处理和传输的需求。相比于电子,光子没有静止质量,且能够实现波分复用通信。因此,采用光子作为信息载体,可以实现更大带宽、更高速率和更低噪声的数据通信。然而,Si是间接带隙半导体,几乎无法发光。而由ⅢA族元素和ⅤA族元素组成的大多数Ⅲ-Ⅴ族化合物是直接带隙半导体,发光效率极高,且多元Ⅲ-Ⅴ族化合物的带隙宽度随成份含量可调。所以,Ⅲ-Ⅴ
学位
作为目前宇宙中最大的自引力束缚系统和大尺度结构中最致密的部分,星系团的研究处于宇宙学和天体物理学的交汇处,具有重要意义。星系团由于其内介质(intra-cluster medium,ICM)具有极高的温度(~0.5-10 keV)和密度(~10-4-10-2 cm-3),是天空中明亮的X射线源。利用新一代X射线空间天文台Chandra和XMM-Newton的高质量图像和光谱数据,并结合其它波段(特
学位
高强镁稀土合金在高速交通工具、航空航天和军工等领域有着巨大的应用前景,但是镁稀土合金存在热成形能力差、本构和再结晶动力学模型复杂且精度差、应变不均匀等特点,很大程度上限制了镁稀土合金的推广。因此,本文选取Mg-8Gd-3Y(GW83)镁稀土合金,首先,利用等温热压缩实验,获得变形温度为300℃~450℃、应变速率为0.001 s-1~1.5 s-1条件下的应力应变曲线,基于特征应力比值和特征应变比
学位
于单个细胞水平探讨生命活动过程中蛋白质的功能化学基础是近年来的研究热点问题。单细胞蛋白质分析实现在单细胞水平上进行蛋白质丰度的检测,从而促进疾病发生发展基本机制研究和药物治疗方案研究。单细胞质谱流式细胞术是新一代的多参数检测流式细胞仪,可实现单细胞水平的不同复杂细胞亚群的表面分子及功能状态定性和定量的同时检测。检测通道数量显著增加,分辨率高,背景低,无需补偿,实验流程简化,在免疫学研究领域发挥着重
学位
高性能REBCO晶体化学计量比及生长模式调控研究REBa2Cu3Ox(REBCO)高温超导材料,因其独特的物理性质和巨大的实用价值得到了科学和工程领域的广泛关注。为推进高温超导理论和实际应用的发展,本论文涉及两类重要高温超导材料的制备科学与技术:用于磁悬浮技术的高性能REBCO顶部籽晶块材生长(top-seeded melt-growth,TSMG),和用于基础物理研究的高品质REBCO提拉法单晶
学位
当今世界经济的一个显著特征是全球价值链的广泛发展,不同国家在全球范围内开展协同生产,积极参与全球价值链的合作与竞争。然而近年来多边贸易机制发展停滞不前,而以自由贸易区(FTA)为代表的区域经济一体化浪潮则加速兴起,区域经济一体化在推进全球价值链拓展深化的过程中发挥着越来越重要的作用,对国际分工和国际贸易格局产生了重要影响。面对全球经济百年未有之大变局,中国经济进入到转型的关键时期,应当更加积极主动
学位
茄子(Solanum melongena L)为全球广泛栽培的蔬菜,紫茄因富含花青素而受到消费者的青睐,但低温、弱光条件常会导致其着色不良而影响品质。花青素是一类水溶性色素,广泛存在于植物茎、叶、花瓣和果皮中,它不仅赋予植物五彩缤纷的颜色,还保护它们免受各种逆境如干旱、极端温度和高盐等的胁迫伤害。研究前期通过转录组和蛋白组学的研究分析,筛选出了受光调控并参与花青素合成的差异表达基因,其中包含有茄子
学位
癌症转移过程中,肿瘤细胞从原位脱落,穿过血管壁进入循环,少部分的循环肿瘤细胞(Circulating tumor cell,CTC)随着血液循环到达远端器官形成转移灶。CTC是肿瘤发生转移的标志物,检测CTC可以实现转移的早期检测。临床上主要通过采血检测CTC,但CTC数量稀少,采用少量血液样本检测的准确率极易受到CTC时间分布的影响。受到采血量和采血频率的限制,体外检测无法捕捉CTC在短时间内的
学位