基于深度学习的颅面特征点标定与配准

来源 :青岛大学 | 被引量 : 0次 | 上传用户:juyuyong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维数据配准是计算机视觉的基本问题,所谓配准就是变换目标数据使得目标数据和参考数据的点集之间精确配准,它是颅面复原、性别鉴定、民族分类等的基础。三维颅面数据形状和姿态各异,采集方式和环境不同导致点数不一致,部分数据存在非刚性形变,定义和提取颅面数据的特征比较困难,所以要获得精准匹配的配准结果是比较有挑战性的工作。特征点的标定是其中重要的一环,传统手工标定的方法费时费力而且不准确。由于近年来卷积神经网络的不断发展和广泛应用,我们将其应用到特征点检测中。针对三维颅骨及面貌数据难以直接输入现有二维深度学习网络的问题,提出使用深度图处理三维面貌数据和使用曲率图以及信息图来处理三维颅骨数据的模型表达方法,简化模型表达方式,利用特征点自动标定网络预测特征点,以减少人工标注特征点的繁琐工作。最后把预测的特征点作为TPS(Thin Plate Splines,TPS)配准的目标数据控制点进行三维数据的TPS配准,从而实现自动准确的颅面配准。本文主要的创新与研究工作如下:1.基于深度图的三维面貌数据特征点自动标定本章针对三维面貌数据提出了基于深度图的三维面貌特征点自动标定方法,使用深度图表达复杂的三维面貌数据,根据三维面貌的生理特征选择左右外眼角点、左右内眼角点、鼻尖点以及左右嘴角点等七个点作为特征点,并转换成二维深度坐标,构建一个特征点自动标定网络估计面貌特征点的坐标,最后再将预测得到的二维深度图像坐标转换回三维数据,从而得到三维面貌特征点的精确位置。2.基于曲率图及信息图的三维颅骨数据特征点自动标定相较于三维面貌数据,三维颅骨数据具有更复杂的拓扑结构,根据三维颅骨数据的生理特征选择左右外眼眶点、左右内眼眶点、左右鼻眶点以及左右嘴角点等八个特征点。由于颅骨数据表面弯曲程度比较复杂,提出了分别基于曲率图及信息图的三维颅骨数据表示方法,将三维颅骨数据转化为具有丰富三维特征信息的二维图像数据,输入深度学习网络。同时,将根据生理特征标记的三维特征点转化为二维坐标,最终利用网络预测三维颅骨数据特征点并应用到颅骨配准中。3.基于深度学习预测特征点的三维颅面配准使用基于深度图的三维面貌特征点自动定位方法预测的特征点作为三维面貌目标数据的控制点,使用基于信息图的三维颅骨数据特征点自动定位方法预测的特征点作为三维颅骨目标数据的控制点。将参考数据的特征点和目标数据预测的特征点点集作为TPS配准的控制点,求参考数据到目标点集的映射,对参考数据进行TPS变换,然后在此基础上寻找目标数据上距离参考数据的最近点,最终得到配准结果。通过和其他方法的实验结果进行对比可以看出我们的方法配准精度更高。
其他文献
目的:非小细胞肺癌是我国最常见的恶性肿瘤之一,早期诊断对于非小细胞肺癌患者的治疗及预后有着极其重要的意义。液体活检重要组成部分的CTC(circulating tumor cell,循环肿瘤细胞)检测在NSCLC(non-small cell lung cancer,非小细胞肺癌)患者的预后评估和治疗干预方面具有重要价值。2010年,CTC分析被写入美国癌症联合委员会(AJCC,American
背景:膀胱癌是一种常见的对人类健康造成严重威胁的泌尿生殖系统的恶性肿瘤,而且,近年来发病率有增高的趋势。膀胱癌作为全球排名第9常见的癌症,同时也在男性肿瘤的发病率中排名第7,发病率约占所有癌症的4.7%。据统计,全年约有43万余粒新发病例,同时因膀胱癌而死亡的病人每年约16.5万,在所有新发病例中男性患者占75%,但是据统计,女性患者的死亡率更高。分子生物学技术正在高速发展,许多种与膀胱癌发病和进
目的:分析因宫颈高级别上皮内病变(High-grade squamous intraepithelial lesion,HSIL)行冷刀锥切术(Cold knife conization,CKC)或环形电切术(Loop electrosurgical excision procedure,LEEP)后切缘阳性患者采用不同临床处理措施后疾病的预后及转归情况,探讨切缘阳性患者的分层管理方式。方法:回顾
目的探讨激活转录因子3(Activating Transcription Factor 3,ATF3)与弥漫性大B细胞淋巴瘤(Diffuse Large B-cell Lymphoma,DLBCL)患者临床病理学特征及预后之间的关系;探讨ATF3对DLBCL细胞增殖能力的影响以及不同ATF3表达水平对DLBCL细胞药物敏感性的影响,及其可能的分子机制。方法应用免疫组织化学染色方法检测119例DLB
目的:乳腺癌内乳淋巴结的复发转移与原发肿瘤的部位联系密切,多项研究发现内乳淋巴结的放疗增加了患者的生存获益,同时也不可避免的带来了心脏毒性和肺的损伤。位于内象限或中央区的乳腺癌患者是否更加需要内乳淋巴结放疗是目前研究的热点。本研究通过分析Ⅰ-Ⅲ期位于内侧象限或中央区的乳腺癌内乳淋巴结复发转移的风险因素,以期对内乳淋巴结高复发转移风险的乳腺癌患者进行提前干预,最终延长患者的无病生存期、提高患者的生存
目的分析Ph+慢性髓性白血病(CML)患者不同时期骨髓细胞染色体核型的分布特点,并探讨不同类型的染色体核型与疾病预后的相关性。方法采用回顾性研究方法,选取2009年1月~2019年1月在青大附院诊断为Ph+的慢性髓性白血病患者351例作为研究对象,其中慢性期317例、加速期12例、急变期22例。所有研究对象均多次进行骨髓染色体培养,并采用R显带技术进行染色体核型检测分析,采用Kaplan-Meie
空压站是公用工程中常见的动力系统,耗费了大量的电能,同时也存在一定程度的电能浪费。空压站的常规节能方式主要是安装变频器。即使在常规节能方式实施后,空压站仍有较大的节能空间——也就是本文优化节能技术的实施空间。优化节能是继管理节能、设备节能与工艺节能之后的新一代节能技术,即利用人工智能算法对多设备在负载可变的条件下进行能耗优化的技术。在优化节能的方法中,有多种因素可影响节能效果,如工艺、设备、控制系
目的:探讨细胞周期蛋白A1(CyclinA1)、三磷酸腺苷酶家族蛋白2(ATPase family AAA domain containing 2,ATAD2)在胃不同上皮性病变中的表达情况,尤其是探讨两者单独或联合表达在辅助鉴别胃粘膜高级别上皮内瘤变与高分化胃腺癌中的临床应用价值;同时探讨两者在进展期胃腺癌患者中的表达与临床病理特征和预后的关系。方法:运用免疫组织化学(immunohistoch
蛋白质翻译后修饰是指蛋白质合成后发生的化学变化。它可以影响蛋白质的结构、亲电性,控制蛋白质稳定性、定位等关键机制,并调节众多生物学功能。近年来,在不同物种中发现了赖氨酸2-羟基异丁酰化修饰(Lysine 2-hydroxyisobutyrylation,Khib)。进一步研究发现,Khib修饰具有多种生物学功能,参与不同的信号或代谢等通路,包括氨基酸的生物合成、碳代谢、糖酵解和转录等。为系统地了解
目的:探讨中医传统运动八段锦对乳腺癌患者癌因性疲乏及相关因素的干预效果。方法:按照便利抽样法,将2020年1月~2020年6月和2020年7月~2020年12月入院的符合纳入标准的对象设为常规康复组和八段锦辅助康复组,每组70例,八段锦辅助康复组患者在常规治疗护理基础上参与八段锦锻炼,常规康复组进行常规治疗护理。通过实验,以问卷调查方式对比研究不同组别乳腺癌患者癌因性疲乏与生存质量及睡眠质量。结果