基于混合注意力机制的多模态脑肿瘤图像分割方法研究

来源 :吉林大学 | 被引量 : 0次 | 上传用户:thriving_hehe
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着空气、环境质量的不断下降,以及人们在日常饮食中不能控制对亚硝基化合物的摄入,脑肿瘤成为威胁人们健康的常见肿瘤之一。随着医学影像的发展,作为影像技术之一的核磁共振成像(MRI)在肿瘤诊断过程中发挥着巨大的作用。然而,医生对图像的判断大都是根据主观经验,不同医生对图像判断也是略有出入,且在图像判别上浪费大量的精力,耽误患者的及时诊断。图像分割作为当前计算机视觉领域的一大研究热点,在脑肿瘤图像分割领域中得到广泛应用,辅助医生进行快速诊断。但是,脑肿瘤图像本身存在噪声大,病灶区域纹理特征不清晰,图像原有的线性特征不足的问题,它作为医学图像本身涉及患者的隐私;并且对于图像的标注任务需要专业的、有经验的放射科医生来进行,这样标注出的结果才更有说服力,所以针对脑肿瘤图像的分割任务有较高的复杂性。近年来,很多国内外研究学者在医学图像尤其是脑肿瘤分割领域已经取得了重大的进展,尤其是基于深度学习技术的图像分割,在很多器官病灶分割任务上表现优异。但是大部分方法仍然存在一些问题,例如,深度分割模型对于3D图像的高维特征挖掘不足,病灶区域与正常器官边界分割模糊,模型本身参数较多,模型浮点计算量较大,使得模型的推理速度较慢且泛化能力较低。基于上述问题,我们提出一种基于混合注意力机制的3D脑肿瘤图像分割架构HANet(Hybrid Attention Network)。HANet采用一种编解码方式,包含3D特征编码器和3D特征解码器,并且在解码器的输出阶段,我们引入了基于通道注意力机制和空间注意力机制的混合注意力机制模块,并且提出一种注意力门单元AGUs,用来整合编码器阶段和上采样过程的两部分特征。网络中采用了密集连接的方式,防止参数在网络训练过程中引起的丢失,本文主要研究内容如下:首先介绍脑肿瘤医学图像分割的背景和研究意义,对图像分割在医学图像尤其是脑肿瘤图像分割任务中的研究情况进行综合概述,并分析了方法的优缺点;介绍了脑肿瘤医学图像的特点,并对脑肿瘤图像分割相关技术作简要介绍。其次,提出全新的针对脑肿瘤图像的分割架构HANet,架构采用一种V型结构,采用编解码方式,并加入混合注意力机制和注意力门单元,架构中还采用了密集连接的方式,一方面防止了数据丢失,另一方面提升了网络的速度。最后,在现有Bra TS18脑肿瘤图像数据集的基础上,进行数据增强,扩充数据集并提出一整套脑肿瘤图像的预处理方法,提出一种重叠性图像分块方法。通过实验,证明了该方法的有效性,在此数据集下验证了HANet分割架构的有效性。
其他文献
背景与目的:血管性痴呆(Vascular dementia,VaD)是痴呆的第二大种类,仅次于阿尔兹海默症(Alzheimer’s disease,AD)。近年来痴呆的发病率逐年增长,VaD也受到越来越多的重视,但目前临床中尚无有效治疗VaD的手段,因此迫切需要探索安全、疗效切实、临床普及程度高的治疗措施。远隔缺血后处理(Remote ischemic postconditioning,RIPos
目的:应用网状Meta分析评价10种抗抑郁药物(氟西汀、氟伏沙明、艾司西酞普兰、米氮平、氯丙咪嗪、文拉法辛、度洛西汀、帕罗西汀、氯米帕明、舍曲林)治疗强迫症(obsessive compulsive disorder,OCD)的疗效及安全性。方法:计算机检索EMbase,Pub Med,Cochrane Library,以及中国知网、万方数据库、中国生物医学文献数据库、维普期刊资源数据库,检索日期
车架作为货车的主要承载部件,在货车结构中扮演着十分重要的角色,因此车架的安全性与可靠性对于整车来说是至关重要的。因此,本文基于遗传算法,在满足可靠度的前提下,对车架进行了轻量化设计。本文所做工作如下:1、建立了车架拓扑优化模型。以单元密度作为设计变量,以结构柔度最小作为目标函数,以结构体积分数作为约束条件,分别针对弯曲、扭转、制动和急转弯四种典型工况对车架进行了拓扑优化,同时参考同类型车架横梁与纵
背景:原发性胆汁性胆管炎(primary biliary cholangitis,PBC)是一种肝内小叶间胆管的慢性非化脓性炎症,并逐渐进展为肝纤维化、肝硬化,最终导致肝衰竭。熊去氧胆酸是原发性胆汁性胆管炎的一线用药,可有效改善肝功能,减慢肝纤维化进展,但约40%的患者应用熊去氧胆酸治疗效果不佳。然而,二线治疗药物奥贝胆酸应用于熊去氧胆酸不能耐受或效果不佳的患者只有50%有效。所以,到目前为止肝移
分子的手性是指一个分子与其镜像不可重叠,这种立体异构形式在化学领域通常被称为对映体。手性在分子尺度甚至在地球生命的进化过程中起着至关重要的作用。同时,科学家们逐渐将手性应用到更多方面,例如手性药物的合成、非对称合成、圆偏振发光材料、手性器件、信息加密等。这里的圆偏振发光指的是手性发光材料在固定波长的激发光照射下发出不同的左手或右手圆偏振光的现象。有机圆偏振(Circularly Polarized
研究目的:探讨白蛋白-胆红素评分(albumin-bilirubin score,ALBI)评估肝硬化合并食管胃静脉曲张出血患者预后的价值,并与Child-Turcotte-Pugh(CTP)评分和终末期肝病模型联合血清Na评分(MELD-Na)进行比较。进一步探讨ALBI评分联合其他标志物(血清Na、AST)对于肝硬化合并食管胃静脉曲张出血患者预后的评估价值,用于指导临床实践。研究方法:回顾性分
目的:探讨QRS终末段扭曲(QRS distortion,也称Grade 3 ischemia,G3I)、额面QRST角(frontal QRS-T angle,fQRS-T角)对于急性ST段抬高型心肌梗死患者近远期预后的预测价值,找出fQRS-T角预测患者12个月及42个月内全因死亡的临界值,并比较这两项指标单独应用和联合应用时对预测价值的影响。方法:1.回顾性收集2017年1月1日至2017年
传统汽车生产线机械化线体采用最原始的悬挂式积放链输送形式,汽车吊具停止依靠撞击实现,造成吊具和轨道不可避免地出现晃动。同时生产线经历了因车型并入的多次改造,整体钢结构改动量较大,承载能力降低。如何在原生产线上实现车型改造及产能提升,缩短研发周期,降低研发成本,提高设计质量是当前车企的研究热点之一。有限元计算分析及结构优化是实现其关键结构(C型吊具)安全性和可靠性的有效手段。本文采用建模软件和编程语
在城市智能计算中,基于定位轨迹数据(GPS)和兴趣点数据(Points of Interests,POI)的城市功能区域划分,可以为城市道路规划、智能交通调度和基于位置的社区服务等多个方面提供有效支撑。然而,受限于城市区域的连通性、兴趣点分布的聚集性以及轨迹与区域功能之间的弱相关性,现有研究通常仅能实现行政区域级别的粗粒度划分,难以满足城市计算的需要。本文在城市计算背景下,针对城市功能区域划分这一
许多视障人士会像视力正常的人一样在日常生活中使用计算机来查询资料、阅读和书写电子文档以及收发电子邮件。对于视障用户来说,在使用计算机的过程中想要获取所需信息,这难免会遇到一些困难,使用感官替代的方式可以有效解决这些难题。其中应用最广泛的就是屏幕阅读器,因为它价格低廉且使用简单。屏幕阅读器的使用,解决了视障用户信息获取中遇到的诸多困难。对于一些非文本信息,开发者们大多使用附带相应文本描述信息的方式将