基于语义特征指导的乳腺癌肿瘤细胞密度估计

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:JK0803_zouzhi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,乳腺癌(Breast Cancer,BCa)是全球女性死亡率最高的癌症之一。由于乳腺中的组织较为疏松且乳腺周围分布着大量密集的淋巴结,肿瘤细胞很容易随着淋巴液和血液转移至身体的其他器官,即发生BCa的远处转移。当发生远处转移时,需先进行术前新辅助治疗(Neoadjuvant Therapy,NAT)直至患者体内的残余肿瘤负荷(Residual Cancer Burden,RCB)降低至一定水平,即具有手术指征后,再进行局部肿瘤的切除手术。RCB的计算需要6个参数,其中计算最为繁琐且困难的是肿瘤细胞密度(Tumor Cellularity,TC),它在病理学上被定义为显微镜下病理切片的肿瘤床(Tumor Bed,TB)中肿瘤细胞核面积的比例。由于细胞核尺寸较小且分布密集,手动计算TC极为费时、容易出错且精度较低。因此,设计算法自动估计TC能有效减轻病理医生的负担,使TC和RCB的计算更为高效。
  目前使用的TC自动估计方法有两种:基于细胞核分割的两阶段TC估计和单个阶段的TC估计。前者基于TC的病理学定义,根据分割模型预测结果计算TC,后者则使用深度学习模型直接预测TC,前者比后者更接近病理专家的工作流程,容易解释,但其性能过度受限于分割模型的性能。为提升TC估计方法的性能,本文利用当前火爆的机器学习算法,提出基于分割语义特征指导的TC回归模型。
  首先,本文改进了U-Net,以实现弱监督细胞核分割网络,该网络能够在仅标注出细胞核位置坐标和对应类别的标签下,实现对细胞核的准确分割。具体而言:首先根据弱标注标签生成两类像素级别分割标签即轮廓标签和位置标签,再向改进的U-Net中引入深度监督机制,并根据两类标签计算分割损失。为准确评估分割网络的性能,在武汉大学中南医院病理科专家的指导下,对测试集的细胞核进行了手工标注,并将其作为评估分割网络的真实标签。实验表明,使用位置标签辅助轮廓标签训练后,能显著降低分割网络对前景细胞核的虚检,并将平均交并比(mean Intersection Over Union,mIOU)由54.42%提高至58.80%。
  而后,本文在细胞核分割网络和TC回归网络的基础上,提出了基于语义特征指导的TC回归模型。考虑到分割网络能提取出对TC估计有指导意义的细胞核高阶语义特征,故将分割网络解码器的多尺度特征图与TC回归网络相应层的特征图融合,融合方式为通道级联和卷积降维。
  进一步地,本文依据标签分布学习(Label Distribution Learning,LDL)的理论,提出了基于深度期望估计(Deep Expectation Estimation,DEE)的TC回归网络。考虑到以TC标签值为中心的邻域范围内数值均可在一定程度上合理且正确地描述图像块,故为对应位置处的正确标签分配伪高斯分布的权重。将浮点数TC值编码成101维标签分布向量,以避免在当前标注数据集上过拟合。使用LDL和加权多分类交叉熵训练回归网络,并基于DEE计算TC值。将语义特征指导和DEE相结合后,模型性能提升,验证了本文模型的有效性。当基础网络为ResNet101时,本文模型的预测概率(Prediction Probability,pk)为0.9335,而直接建模成回归问题时的pk值为0.9154。
  综上所述,本文基于改进的U-Net和LDL理论,提出基于语义特征指导的TC回归模型,模型包括细胞核分割网络、特征图融合模块和TC回归网络。分割网络仅需弱标注标签,推广性好。模型实现了TC自动估计,减轻了病理医生的负担,提高了TC和RCB的计算精度和计算效率,对BCa患者治疗方案的设计、RCB指标的临床推广和BCa化疗药品的研发具有重大意义。
其他文献
近年来,低成本的多旋翼无人机凭借其机动性强、可扩展性高等优点正迅速走向民用。然而,无人机有限的续航时间和通信距离限制了其服务范围。因此,在实际应用中,通常会利用车辆搭载无人机到达目标区域的附近,然后再出动无人机执行任务。高效的车辆和无人机协同能极大地提高效率、节省成本,因此引起了学术界的广泛关注。然而,现有的相关工作大多侧重于研究车辆-无人机协同进行物流配送的场景,缺乏对无人机巡检场景的关注。除此之外,现有研究大都只考虑车辆与单架无人机协同的模式,而多架无人机并行执行任务能显著地提高效率。
  鉴于
近些年来,随着生活水平的提升,人们对体育运动的参与度越来越高。但运动的开展需要专业教练的指导和点评,动作不规范轻则达不到锻炼效果,重则损伤身体机能。动作分析技术的出现,使得人们可以随时随地了解自身动作完成情况,获得专业的点评。传统的动作分析方法主要基于运动捕获设备,存在佩戴不方便、设备高成本、方案不通用等缺点。基于视觉的相关研究很多,但基本都局限在视频动作分析的某一环节,缺少一种从视频数据到人物动作分析结果的端到端解决方案。将现有技术应用到视频动作分析中,还需要解决诸如人物运动模糊、关键点遮挡、相似动作区
随着计算机视觉技术的不断发展,作为核心问题之一的图像语义分割也越来越受到学术界和工业界的关注。图像语义分割旨在将图像中的每一个像素划分到事先定义好的语义类别当中去。通过对该问题的研究,一方面有助于理解人类视觉机制,以辅助探索图像理解和场景感知等更高层次的视觉任务;另一方面也可为自动驾驶和图像搜索等广泛的实际应用场景提供理论与技术支撑。
  现有的基于图像级标签标注的图像语义分割算法将缺失的标注信息视为一个整体进行恢复,一般首先生成图像的像素级伪标注数据,然后再使用这些伪标注数据训练算法模型。虽然这些
【摘要】水利水电工程施工质量安全,一直都是人们关注的焦点,同时与国民经济发展、造福人们生活息息相关,随着我国社会发展的脚步越来越快,建设兴修水利水电工程的项目就自始没有停下,水利水电工程是一项利民大业,不仅能够有效消除水灾,还能够充分利用水资源改善能源短缺、水源污染环保等问题。随着我国相关政策的不断落实,对于水利工程质量安全的施工,提出了更多的要求。作为工程建设中必不可少的环节,施工质量安全不仅关
期刊
随着3D数据获取的便利,3D数据大量出现,对原始3D数据质量提升的需求也愈发迫切。网格数据作为3D数据的一种主流表达形式,其高质量的恢复显得尤为重要。3D网格数据的处理流程一般包括重建和去噪这两个阶段,即先从2D观测重建出3D网格,再对3D网格进行去噪后处理。本文的3D网格重建和去噪算法旨在研究如何提高这两个阶段所输出3D数据的质量。锐利边缘是保证3D网格数据高质量且细节丰富的关键特征。然而,在以往的3D网格重建或去噪任务中,它没有引起人们足够重视,甚至常被错误地以噪声处理。在3D网格重建任务中,需要解决
近年来,计算机视觉应用领域出现了从2D视觉到3D视觉的转变,3D视觉显著性检测作为这些应用的基础,引起了广泛的研究兴趣。与传统2D显著性模型不同,3D显著性模型挖掘了场景不同模态的线索,包括2D线索、深度线索和运动线索等,有助于提高显著性检测的性能。多模态显著线索之间存在互补和竞争关系,如何有效地融合这些线索仍然是一个挑战。因此,本文基于最常用的3D数据格式之一,即RGB-D视频,重点研究了显著性检测中多模态线索融合的问题。然后,为了进一步提高显著性检测模型的性能,本文选取了近几年兴起的光场数据,它相比于
高效压缩是视频通信的前提,特别是对于面向未来交互式视频应用的多视点视频加深度(Multi-view video plus depth, MVD)数据而言尤为重要。MVD的高效压缩虽然给视频传输、存储带来了可能性,但是在编码过程中所产生的压缩失真具有不可逆性,这给终端用户的图像呈现、人机交互、图像绘制等均带来重大影响。如何能够在没有编码端原始高质量信号的前提下有效提升终端用户的MVD质量,是未来交互式视频在面向实际应用过程中亟待解决的挑战性难题。传统视频编解码器中的环路滤波能够利用图像空域信息进行质量提升,
各种网络应用技术的提升以及实现,使得人们的生活变得丰富多彩。无论是虚拟现实,还是交互式游戏等强大的应用,归根结底都需要网络技术的支持。为了保证用户的服务质量,这些应用往往需要网络能提供高带宽,低延迟,以及带宽的公平分配。网络拥塞控制算法BBR(Bottleneck Bandwidth and Round-trip propagation time),是由谷歌新提出的具有良好性能的拥塞控制算法,其在带宽利用以及延时方面,相较于当前常用的Cubic算法均有明显提升,更能适应当前应用场景的需求。然而,随着对BB
近年来,高清视频技术为用户带来了更好的视觉体验,但同时也带来了巨大的存储与传输的挑战。因此视频压缩技术已经成为解决大容量视频传输与存储问题的关键。传统的视频压缩技术是基于变换量化操作的有损压缩。因此,在压缩的过程中会出现高频信息,以及细节信息的丢失。这些信息的丢失会导致压缩后的视频质量下降,出现诸如方块效应、振铃效应等失真。传统的视频压缩技术中具有对质量失真进行补偿的技术,被称为环路滤波。但是传统的环路率滤波技术泛化能力低,无法对不同内容的视频均达到良好的补偿效果。基于以上所述的挑战,本文采用深度学习的模
【摘要】我国现在开始推行绿色可持续发展,通过使用清洁能源的方式来发展我国的经济。所谓的清洁能源是指水能、太阳能、风能等可再生能源,这些能源在使用的过程中不会产生环境污染,同时能源可再生,对于环境保护有很大的帮助。并且我国的水电在这几十年中发展速度十分快,如今已经建设成了多做大型水电站,而且在许多水源充足的地区小型水电站成为当地电能供给的主要形式。小型水电站使用方便,但是在建设和维护的过程中我们也会
期刊