基于深度学习的小肠间质瘤检测方法及其可解释性研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:ivanc1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
小肠间质瘤(Small Intestinal Stromal Tumor,SIST)是原发于人体小肠部位的一种潜在恶性肿瘤,缺乏特异性临床表现。目前,在影像学中对SIST的诊断主要取决于医生丰富的临床经验,该方式效率低且受主观因素影响大。近年来,深度学习技术在医疗辅助诊断领域中发挥着重要作用,有效提升了病灶筛查的效率和准确率。然而,现有方法在SIST检测任务中的应用仍面临着特征提取及融合不充分、假阳率高和缺乏可解释性等挑战。因此,本文针对SIST数据特点和实际应用中出现的问题,设计了基于深度学习的小肠间质瘤检测模型并对其可解释性进行说明,以自动识别和定位CT切片中的病灶区域,为医生的诊断结果提供可信的辅助性建议。针对小肠间质瘤的CT影像数据量不足,其病灶具有纹理复杂、大小不一和形态多变等特点,本文对小肠间质瘤检测模型的Backbone和Neck部分进行设计,提出了基于3D上下文增强的多尺度特征融合网络(3DMF Net)。该网络首先利用切片分组输入策略引入相邻切片的上下文信息,同时考虑了相邻切片特征中通道和空间信息的重要性,设计了基于注意力机制的3D上下文特征融合模块3DFB和3DFN。然后结合FPN网络结构,3DFB和3DFN在特征提取的不同阶段充分融合了3D上下文特征与多尺度特征,有效丰富了病变的特征表达。实验结果表明,3DMF Net能够有效提升模型的灵敏度。在允许每张切片中平均出现8个假阳性结果的条件下,模型在SIST检测任务中的最高灵敏度达到了98.06%。针对小肠间质瘤的CT影像数据信噪比低且背景复杂,容易出现大量假阳性预测结果的特点,本文进一步对小肠间质瘤检测模型中的预测分支和Head部分进行设计,在3DMF Net的基础上提出了基于多分支辅助的小肠间质瘤检测网络。该网络的位置感知任务分支在训练时执行切片分类和位置预测任务,充分建模了CT序列中的固有信息,减少了模型在非小肠区域切片中的假阳性结果。同时,弱监督语义分割辅助分支使用框级标注初始化伪掩码并在迭代过程中通过图模型进行优化,在训练阶段使用更纯净的像素级标注给小肠间质瘤检测任务提供了良好的辅助监督信号。进一步的,该网络在测试阶段将分割分支和检测分支的预测结果进行融合以产生更稳健的检测结果。基于融合后的结果,本文提出了一种硬负例挖掘策略,重点关注图像中难以区分的区域。实验结果表明,以上方法有效降低了小肠间质瘤检测模型的假阳率。本文所提出模型在置信度为0.5的阈值下,得到每张切片的平均假阳性数量为4.28,相比Baseline中的10.71,降低了6.43。针对基于深度学习的小肠间质瘤检测模型缺乏可解释性这一关键问题,本文在最后利用特征图可视化和Grad-CAM类激活映射方法对模型进行了视觉解释。分析了不同分支及策略对网络所关注特征区域的影响,验证了模型具有与医生诊断知识相匹配的预测模式,为模型在医学临床中的应用提供了基础。
其他文献
在移动终端、边缘推理等领域快速发展的当下,人们期待人工智能芯片不仅可以提供充足的算力,而且具有极低的功耗开销,即高能效神经网络加速器人工智能芯片。本文基于多权重多线程执行模型人工智能计算架构,利用逻辑复用、逻辑复制、流水线等数字芯片设计思想,设计优化高能效神经网络加速器芯片计算核心模块。具体来说,1)采用逻辑复用和流水线设计方法,优化人工智能计算架构内组合逻辑资源,相较于基准架构,降低组合逻辑面积
学位
FPGA拥有设计灵活、修改方便、开发成本低、开发周期短等众多优点,因此在通信、军事、航天、无人驾驶等领域均有愈发广泛的应用。FPGA的开发需要用到相应EDA软件。而目前商用的FPGA EDA软件主要由Xilinx和Intel等国外大公司垄断。这种垄断会形成技术依赖,也会存在断供的风险。在学术上,以VTR为代表的EDA软件主要面向简单的理论模型,且其流程做到布线即止,难以用于复杂的实际芯片。因此,研
学位
功率放大器在射频收发系统中起到重要作用,是无线通信系统中最重要的模块之一,本文中所设计的功率放大器是相控阵芯片的一个模块,其性能好坏对于系统至关重要,对整个通信收发系统的性能影响很大。本论文基于IBM 0.13μm Si Ge Bi CMOS8XP工艺,设计了两款工作在92-96 GHz频段内的功率放大器。仿真结果表明,本论文所设计的两种功放在关键指标上均较好的满足了设计要求和应用需求。针对W波段
学位
目标跟踪是计算机视觉领域的一个重要课题,在安防监控、视觉导航、医疗诊断、军事制导等方面有广泛应用前景。然而,由于目标运动过程中会出现多尺度变化、遮挡干扰等问题,现有目标跟踪算法并不能同时有效应对多种问题。本文聚焦于跟踪过程中目标多尺度变化和遮挡干扰问题展开研究,旨在通过借鉴目标检测领域相关技术提升跟踪器精度,实现跟踪器有效、稳定运行。(1)针对目标跟踪过程中的多尺度变化问题,结合多层特征融合思想,
学位
单细胞转录组测序技术的发明使得对细胞的研究从之前Bluk测序的群细胞水平上升到单个细胞水平。随着技术的日益成熟,单个细胞的测序成本也大幅下降,越来越多的大规模数据被测出。更大规模的数据可以让研究人员更深入的探究细胞间的差异,发现未知的细胞类型。聚类作为单细胞转录组研究中用于细胞类型识别最常用方法,是单细胞数据后续深入研究的基础,但是随着数据规模的增长,现阶段的聚类算法已经出现运行效率低以及不能正常
学位
染色质结构在基因调控与细胞功能中发挥着重要的作用,目前对于单细胞染色质结构的研究有基于图像和染色质构象捕获技术(Hi-C)等方法,这些方法能够捕获全基因组范围内基因的相互作用信息。传统的染色质结构研究认为染色质在细胞核中形成了一种从最小的染色质环(Loop)到拓扑相关结构域(TAD)、从TAD到A/B区室、从区室到染色体疆域的从小到大的层级关系。通过染色质相互作用数据准确地识别各个结构在细胞基因组
学位
目前,资本市场对于国家的经济发展非常重要,特别是在经济和储蓄水平不是很高的泰国。资本市场有助于刺激和推动经济增长更快,并对增加收入和提高国家生活水平产生影响。根据每年决定投资股票市场的新进入投资者数量,股票市场已经成为了泰国人民获得收益的热门渠道之一。此外,上市公司应了解投资者的行为以及决定投资股票的因素。因此,本研究的目的集中在影响投资股票市场决策的人口特征因素与投资行为之间的关系。研究的主要目
学位
伴随着5G技术的快速发展,多媒体视频信息量呈现爆炸式增长。视频技术正在突破传统的二维平面类向空间自由视角方向上演进,它给人们带来高清、可交互的视频观影体验。自由视角视频技术的突破将改变人与媒体的交互方式,在5G超高清视频、体育、综艺、智慧场馆、直播等场景具有重大应用价值。中国超高清视频产业联盟发布的《5G超高清新场景白皮书》指出:超高清视频业务是5G早期研究场景中最具吸引力的方向。其中自由视角视频
学位
在医学临床研究中,病理影像是医生诊断癌症的基础。随着数字切片技术的发展,全视野的数字化病理图像相较于传统玻璃切片,可以在不同倍率下清晰地表示出细胞信息。但每一张病理图像仍然需要病理专家认真地读片,并没有降低医生在诊断方面耗费的时间与精力。随着计算机硬件与人工智能技术的发展,将深度学习与病理图像相结合一方面可以用于预测病理图像中的肿瘤区域或其他目标区域,另一方面可以用于挖掘病理图像中隐藏的疾病特征并
学位
使用计算方法预测疾病相关的基因有助于揭示疾病的分子机理,为通过生物实验验证基因和疾病的关系提供指导,减少实验开销。复杂的生命活动往往经由分子间的相互合作、相互作用来实现,因此许多方法通过构建和使用分子网络来挖掘疾病相关的基因。随着对疾病相关遗传因素研究的深入以及测序技术的发展,融合多个网络、构建包含疾病与多种生物分子间的关联及相互作用的异质网络成为了可能,异质网络的引入为可以从多个层面分析和理解疾
学位