深度学习在产前超声标准面分类、可视化和时序学习中的应用研究

来源 :深圳大学 | 被引量 : 0次 | 上传用户:laurachenqh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在产前超声诊断过程中,胎儿标准切面的检测识别是一个关键步骤,是后续结构观察、生物参数测量、畸形诊断的前提。但是标准面的检测耗时繁琐,严重依赖于操作者的主观经验,对于不同操作经验的医师常做出不同的判断结果。因此设计一种自动化的产前超声标准面分类提取系统,对于减少主观差异、提高诊断效率、降低漏检率具有重要意义。与其他成像方式相比,超声图像质量较差,往往受到形变、噪声、伪影的影像。同时实际应用中对智能算法的实时性要求很高,在实时视频中标准切面与相邻帧的非标准切面仅存在细微的差异。因此设计高效实时的标准面分类检测系统是一项十分具有挑战性的工作。针对上述问题,本文从三个层面出发,使用深度学习方法对标准切面分类检测问题进行了系统研究,提出了相应的解决方案。1、产前超声标准面实时分类。在实际应用中智能超声系统需要能够实时运行,但医院设备中的GPU计算资源一般相对较弱复杂的算法不易集成。之前的一些研究在设计时较少考虑算法速度和计算复杂度问题。所以这部分研究我们主要以实时性作为切入点,使用多尺度密集连接网络设计了标准面实时多分类系统。它多尺度和密集连接的设计综合利用了低级别的粗粒度特征和高级别的细粒度特征,使得网络学习更加高效。同时级联式的设计可针对任务调整网络深度进一步节约了计算量。2、可视化与弱监督定位。在深度学习的任务中特别是医学相关的问题中,仅仅给出网络最终的分类预测结果,其说服力是比较弱的。研究时我们不仅希望得到网络的判断结果,而且希望知道网络做出判断的依据。所以在这部分我们使用了类激活映射的方法对标准面分类任务中神经网络的可解释性进行了研究,分析网络视觉焦点和分类结果之间的关系,以热力图的方式研究了网络的注意力机制。最后设计了基于对抗擦除策略的弱监督定位方案。3、标准切面提取、时序学习方法研究。超声视频数据不仅是单帧图片的集合,其中含有丰富动态时序信息。这部分我们使用产前超声视频数据,研究设计基于深度神经网络的视频学习方案,在网络学习中引入帧间时序信息,对基于光流法、LSTM、三维卷积网络的多种方案进行方法学研究。在此基础上针对三维卷积网络不能输出帧级别标签的问题,设计了多级时序上采样策略提出了新型的帧级别三维卷积网络。最终实现了超声视频中胎儿标准切面的实时检测提取。
其他文献
头颈部癌症是常见的癌症类型。图像引导的放射治疗是头颈部癌症最有效的治疗方法。放疗计划的制定需要在计算机断层扫描图像(computed tomography,CT)中勾画危及器官(organ-at-risk,OAR)。临床医生手动勾画OAR,耗时耗力,且主观。深度学习是近年来火热的一种机器学习方法,该方法能根据数据自动提取有意义的特征。有研究利用深度学习方法实现头颈部OAR分割,并展现出优异的性能。
世界范围内有8%–12%的夫妇患有不孕不育,其中男性不孕不育的占比为40%-50%,近年来,由于环境污染和男性生理机能的衰退,男性不孕不育的趋势仍在不断上升。男性不孕不育最实用的诊断方案是精液质量分析,但是目前精液质量分析的自动化程度不高,仍然依赖于医生的经验主观判断,缺乏准确数据。计算机辅助精液分析(CASA)是精液质量自动化分析的一种方法,这种方法不仅可以为精液质量分析提供量化数据进行更准确地
我国的肝癌防治面临着严峻的挑战,肝癌患者人数和死亡病例占全球的一半以上。肝癌的诊断主要包括影像学诊断、肝穿刺活检和血清学分子标记物检测。其中,超声成像由于具有操作简便、快速直观、无创便携、费用低廉等特点,是临床上最常用的肝脏影像学检查方法。肝癌的发生和发展与其剪切模量的变化密切相关。因此,对剪切模量的分析有望为肝癌早期诊断提供重要的依据。超声弹性成像作为获取组织剪切模量分布的重要方式之一,具有实时
乳腺癌作为世界上第二种最为常见的癌症类型,是导致女性死亡率增高的原因之一,已经成为女性健康的第一杀手。在乳腺癌的临床诊断环节中,钼靶检查由于具备患者疼痛相对较小、操作简单可重复、分辨率高和检出率高等优势,成为了最先进的乳腺癌检查方法之一。医生通过观察乳腺钼靶图像对患者作出诊断,这一过程通常耗时费力,并且效率不高。为了提高诊断效率,减小误诊风险,针对乳腺钼靶图像开发基于人工智能的计算机辅助诊断系统显
肌萎缩性脊髓侧索硬化症(Amyotrophic lateral sclerosis,ALS)是一种致命的快速进行性神经退行性疾病。依达拉奉(Edaravone,EDA)是目前获美国食品药品管理局批准的仅有的两种药物的其中一种。EDA在疾病早期可减缓患者运动能力的下降,对晚期患者的治疗效果不佳。过去大多数的临床前研究只评估药物对脊髓的治疗效果,而没有把在病理上很重要的运动皮层纳入评估。近来,运动皮层
研究表明,生物组织发生早期病变且尚未在形态结构上产生改变时,生物组织病变部位的电特性(电阻抗、电导率、介电常量)首先发生变化。因此通过检测组织的电特性就有可能达到对疾病早期诊断的目的。生物电阻抗成像(Biological Electrical Impedance Tomography,BEIT)是对组织电特性检测的成像技术,一种继形态结构成像之后的新一代功能成像技术的统称。感应式磁声成像(Magn
面瘫又叫面神经损伤,面容的改变会给患者带来心理焦虑和生理疼痛,严重影响患者的正常人际交往与生活。及时有效地评估治疗与康复训练,有助于面瘫患者尽早康复,恢复正常人的生活质量。本课题调研发现关于面瘫评估的大多数研究是基于面部局部或整体特征进行的。目前的面部特征点检测模型使用正常人面部人脸图像数据进行训练,而面瘫会导致患者面容怪异、口角歪斜,所以使用主流的特征提取模型会出现较大误差。面瘫后面肌运动内在反
在产前超声筛查与诊断中,从三维容积超声或动态超声序列中获取标准面对于后续的生物参数测量、产前畸形诊断和胎儿生长发育评估至关重要。由于产前超声筛查需要获取几十种标准切面,因此使用动态超声序列获取标准面往往非常耗费时间与精力并且依赖医生的临床工作经验。三维容积超声通常可以通过单次扫描便可获取多种标准切面,相较于动态超声序列,其具有更高的效率并减少对医生临床工作经验的依赖。然而,由于三维容积超声本身巨大
超声射频信号是从换能器处获取的回波信号经过前置放大,A/D变换和波束合成后得到的信号,由于其包含比较完整的声场以及组织相互作用信息,在超声设备中将射频信号作为超声图像重建的原始信号。由于在传统的超声成像过程中涉及多个步骤,每个步骤都需要设置许多参数,特别是图像后处理部分,不同厂商的超声成像系统采用不同方法,其成像风格、质量不尽相同而且都根据自己的经验来进行调参。因此提出一种通用的新型超声成像方法,
脑卒中是最常见的脑血管疾病,并且是全世界范围内造成死亡和残疾最常见的原因之一。对特定脑区的标记具有潜在的研究意义,这些标记可以潜在地提供包括病情评估之内的其他信息,以预测病人功能区的恢复情况(例如,运动,言语)和对治疗反应的可能性。此外,结合多种成像模式获得的影像能提供互补的多模态信息,但是直接使用未经配准的多模态影像不仅可能会使得计算机自动分割方法的性能受限,还会增加临床医生的阅片困难。对医学影