基于多模态深度学习的癌症生存期预测方法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:lbo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
癌症作为一种多病因、多过程的复杂疾病,已成为人类生命和健康的第一杀手。因此,实现对癌症患者生存期的精准预测,在辅助医生制定个性化的诊疗方案,以及改善患者的生存结局等方面具重要意义。根据现有研究,有效融合癌症组学和病理图像多模态数据对提升生存期预测的准确性具有重大意义。然而,现有基于克罗内克积的生存期预测方法不仅会引入大量参数,从而导致计算成本过高以及模型过拟合等诸多问题,而且现有方法采用的单次融合方式,难以充分融合组学和病理图像等不同模态的数据。针对上述问题,本研究提出了基于多模态深度学习的癌症生存期预测方法,通过对多模态癌症数据进行更加专业有效的融合,不仅显著提升了癌症生存期的预测性能,而且有效降低了计算成本。本研究主要完成以下几个方面的工作:(1)为有效融合多模态癌症数据,从而实现对患者生存期的准确预测,本研究提出了一种新颖的端到端多模态癌症生存期预测方法HFBSurv(hierarchical factorized bilinear fusion for cancer survival prediction)。该方法通过采用基于深度神经网络的分层融合框架,将多模态数据融合问题分解为低层和高层两个不同的融合层次。同时,分别在低层和高层融合中设计了参数更少的模态特异性注意力分解双线性模块和跨模态注意力分解双线性模块,用于捕获各个模态内部和不同模态之间的特征交互关系,在此基础上进一步结合预测模块进行癌症生存期的有效预测。通过多种性能指标对该方法进行评估,结果表明HFBSurv中各模块不仅有助于提升癌症生存期预测的准确性,而且大大降低了模型的计算复杂度,同时与现有方法的对比,也显示了 HFBSurv在生存期预测方面的优越性。(2)为对癌症患者间的潜在关系进行有效建模,从而提升癌症生存期的预测性能,本研究进一步提出了图注意力分解双线性分层癌症生存期预测方法G-HFBSurv(graph attention hierarchical factorized bilinear fusion for cancer survival prediction)。该方法在HFBSurv的基础上,首先有效融合患者的组学和病理图像数据并生成相应的多模态特征,然后利用上述多模态特征构建患者相似性图以有效建模患者间的潜在关系。最后通过基于患者相似性图的图注意力模块对患者的多模态特征进行精化,从而实现癌症生存期的准确预测。实验结果表明,G-HFBSurv通过对患者间的潜在关系进行有效建模,显著提升了癌症生存期的预测性能。
其他文献
电商消费帮扶作为一种新兴的扶贫助农措施,在脱贫攻坚及巩固中得到了广泛的应用,极大地帮助了贫困地区的农户,在提高农户收益的同时也很好地激发了其从事农业生产的积极性。而助农帮扶产品所带来的消费者价值由质量价值与心理价值共同决定,消费者一方面关注实物产品的价值,另一方面也关注购买中的体验价值,因而同时考虑两方面的影响就十分必要。为了更好地促进农业产业发展,政府出台了相关帮扶政策,然而这些政策对供应链成员
学位
移动互联飞速发展为消费电子市场中的智能终端设备市场铺平了道路,也催化了软件市场的爆发式增长。一些在消费者购买前就存在于产品上的商业应用程序被称为预装应用,智能终端设备公司会推出包含丰富多样的商业应用程序的产品。它们能通过消费者的使用行为带来额外收益,对智能终端制造商、第三方软件供应商在内的利益相关者有很高的商业价值。因此,了解不同智能终端设备公司对预装应用的态度对智能终端设备市场的所有利益相关者都
学位
蜱又称草爬子,是寄生宿主体表的一种重要专性吸血的病媒生物,是仅次于蚊子的第二大传播媒介,是多种自然疫源性病原体的天然贮存和传播媒介。四川省九龙县地处高原,物种丰富,森林繁茂,为蜱的生存提供了栖息地。至今,该地区尚无蜱的种类及分布的研究,蜱和牦牛中蜱媒病原的相关研究很少。因此本研究为掌握九龙县蜱的种类及其分布,蜱和牦牛中蜱媒病原的种类和感染情况,为保障当地居民健康、提高公共卫生水平和促进畜牧业健康发
学位
雷达多目标跟踪(Multiple Target Tracking,MTT),即在雷达监视区域内估计并维持多个目标的状态,是后续目标识别、态势预测等信息融合任务的先决条件,所以在雷达信号处理系统中占有十分重要的地位。海面背景下的目标跟踪,一直以来都面临着复杂海情所致的海杂波干扰、目标回波信号起伏等难题。此外,鉴于雷达分辨能力的提升,以及扫描模式下雷达波束重复照射目标,目标的回波不可避免地在距离维和方
学位
在社会经济高速发展的新时代,交通与旅游融合发展是在依托交通基础设施通达性的基础上,通过挖掘交通与旅游双重属性,带动区域交通、旅游、文化、经济综合协调发展。但风景道作为一种新形式的自驾车旅游目的地与线型旅游目的地,与传统的旅游目的地相比存在很多的不同之处,对于旅游者而言,风景道游憩出行主要受制于旅游者的个人属性、交通属性与旅游目的地属性等条件的制约。目前川西地区存在风景道对沿线旅游资源开发支撑作用不
学位
报纸
城市化步伐加快,我国较多山丘区流域存在没有实测水文数据或实测水文数据序列较短的现象,此外下垫面属性变化也可造成原本有良好的实测水文数据缺乏实用性,流域水文参数不确定性增大,这就使得我国的水文预报存在较大的障碍。因此,研究流域地区的水文模型适用性以及如何将有资料地区的水文参数应用到缺资料地区有着重要的研究意义。现阶段处理无资料、缺资料地区的水文模拟及预报以水文模型参数区域化为常用手段,主要方法以参数
学位
中国企业利用经济全球化和国际分工的好处,通过OEM模式获得了快速发展,借助于仿制和模仿创新等利用性创新行为,使中国成为全球制造第一大国。然而,随着国别竞争加剧,美国围堵中国崛起,对中国实施“卡脖子”技术管制,导致中国关键核心技术受制于人。为此,中国企业必须在做好利用性创新的基础上,加快推进探索性创新,实现二元创新平衡。如何实现二元创新平衡成为企业实践难题,也成为理论研究的重要主题。以往研究多从“供
学位
放疗过程中可能照射到的正常器官或者组织称之为危及器官。危及器官的勾画是癌症放疗计划制定中的关键步骤,其直接关系到放疗照射范围以及剂量的确定。精准的危及器官勾画能够有效避免放疗过程对正常器官造成伤害,从而最大程度地减少放疗的后遗症。临床上,危及器官的勾画主要靠影像医生手工完成,不仅费时费力,还很出现漏判和误判。自从深度学习方法运用于危及器官分割以来,大量的方法层出不穷,然而大部分方法都过于关注性能而
学位
近年来,劳动力市场岗位大量减少,就业压力不断增加。当前疫情频发,大量企业无法维持正常运转,进而倒闭,就业市场逐步缩小。全国两会中也强调要“稳企业保就业”,其具体措施包括加大创新投入,加大新产业新业态的探索力度。由此可知,国家对创业的重视程度日益增强,因而创业相关的文献研究也更具有时代意义。在日益激烈的市场竞争下,新创立的企业往往需要不断适应变化的环境,这就要求创业者具备良好的自我调节能力。只有创业
学位