C~2 Transformer U-Net:面向跨模态和上下文语义的医学图像分割模型

来源 :电子与信息学报 | 被引量 : 0次 | 上传用户:lixin062
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
跨模态的医学图像可以在同一病灶处提供更多的语义信息,针对U-Net网络主要使用单模态图像用于分割,未充分考虑跨模态、上下文语义相关性的问题,该文提出面向跨模态和上下文语义的医学图像分割C~2 Transformer U-Net模型。该模型的主要思想是:首先,在编码器部分提出主干、辅助U-Net网络结构,来提取不同模态的语义信息;然后,设计了多模态上下文语义感知处理器(MCAP),有效地提取同一病灶跨模态的语义信息,跳跃连接中使用主网络的两种模态图像相加后传入Transformer解码器,增强模型对病灶的表达能力;其次,在编-解码器中采用预激活残差单元和Transformer架构,一方面提取病灶的上下文特征信息,另一方面使网络在充分利用低层和高层特征时更加关注病灶的位置信息;最后,使用临床多模态肺部医学图像数据集验证算法的有效性,对比实验结果表明所提模型对于肺部病灶分割的Acc, Pre, Recall, Dice, Voe与Rvd分别为:97.95%, 94.94%,94.31%, 96.98%, 92.57%与93.35%。对于形状复杂肺部病灶的分割,具有较高的精度和相对较低的冗余度,总体上优于现有的先进方法。
其他文献
随着经济社会的发展与科学技术的进步,各行各业的竞争日渐激烈,各大企业都开始积极思考如何提升自身的核心竞争力、减少相关不必要的成本支出,仓储成本就是其中一项。而传统的仓储管理模式已然无法满足当下企业在新时期的发展需求,对此,企业需紧跟时代的发展步伐,对现有的仓储管理工作进行不断地优化和改善,以期能够充分发挥仓储管理的实效性。基于此,作者将围绕仓储管理这一核心内容,先是阐述了什么是企业仓储管理,又分析
本文主要是基于数学学科核心素养的视角来研究圆锥曲线的解题。圆锥曲线作为高中数学的重要组成部分,其内容与思想具有很多不可替代的促进学生核心素养发展的功能与作用。事实上,圆锥曲线对于大部分学生来说,还是比较难的。本文通过运用文献研究法、调查法和案例分析法,以所涉及的经典教育理论为研究基石和导向,详细介绍了圆锥曲线的知识框架与内容结构。文章在波利亚解题思想的指导下,并借鉴瓦根舍因的范例教学法与布鲁纳的归
科技水平的进步和工艺水平的提高给予了超写实风格的陶艺制作强有力的支撑,现代陶艺的开端也为超写实风格在陶艺领域的发展创造了良好的环境。三岛喜美代是日本超写实风格陶艺的代表人物,作品来源于生活中的纸质信息和生活垃圾等,擅长将日常物品等比放大用陶瓷材料给观众视觉冲击。以三岛喜美代为典型,分析超写实风格陶艺的形成原因及其作品特征。通过对日本艺术氛围研究和波普艺术带来的影响,了解超写实风格陶艺在日本形成的原
总结万强教授治疗胃下垂临证经验;万教授认为胃下垂为气机升降紊乱,治疗不惟补中益气升提法。提出可分期治疗:治疗初期,通补兼施,以通为主;后期以补为主,临床上效果显著。
本文详细地分析了旋风分离器的分离原理及气体流动状态,深入地讨论了影响旋风分离器分离效率的诸多因素、有关设计方法及设计中应主意的问题。
初中生物学实践性作业设计应坚持以人为本,通过借助模型建构,创设真实情境,挖掘课外资源等策略,发展学生的生物学核心素养。同时,实践性作业的设计,还应以课程标准和核心素养为导向,注重作业分层性,着力跨学科联系和重视形成性评价。
为了解决以往人工实地监察督导方式对钢铁企业监测耗时耗力等问题,文章提出基于卫星热红外传感器发现高温异常区,将传统的遥感解译与热红外异常值监测相结合,选用第一季度3—5月准同步数据,结合已有钢铁企业范围和同期高分辨影像等分析钢铁企业的热红外阈值,根据热红外阈值及热异常分布情况提取出疑似钢铁企业/地条钢企业;根据中高分辨率数字正射影像建立解译标志,套合已有钢铁企业和“地条钢”图斑,对异常区域进行判定。
肺癌属于一种严重威胁着人类生命健康的恶性肿瘤之一,肺癌化疗的主要给药方式为静脉注射给药,疗效低且易引起严重的全身不良反应。近年来,出现了很多新型药物载体,能够选择性地靶向肿瘤细胞,有效降低抗肿瘤药物的不良反应。本文对近些年来肺靶向抗肿瘤药物新剂型的研究文献进行了综述,为肺靶向剂型的开发提供参考。
多模态医学图像能够有效融合解剖图像和功能图像的信息,将人体内部的功能、解剖等多方面信息反映在同一幅图像上,在临床上有十分重要的意义。针对如何高效利用多模态医学图像信息的综合表达能力,以及如何充分提取跨尺度上下文信息的问题,该文提出跨模态跨尺度跨维度的PET/CT图像的Transformer分割模型。该模型主要改进是,首先,在编码器部分设计了PET/CT主干分支和PET, CT辅助分支提取多模态图像