人体关键点检测模型及其向心脏关键点定位的迁移研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:xiaolaohu_521
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
依赖于“大数据”技术与高性能处理器的蓬勃发展,深度学习以其强大的鲁棒性和有效性成为了计算机视觉、自然语言处理等人工智能分支领域中占据主导地位的研究方法。人体关键点检测是计算机视觉中一个极具挑战性的研究。可用于:动作识别,异常行为检测,安防等。在心脏医学图像处理领域,心脏关键点定位也是一项意义重大的研究。准确地定位心脏关键点有助于实现心脏图像全自动分割应用。并且,它是许多后续图像处理与分析步骤的必要条件。这两种研究在形式和特征上存在着内在的联系。本文旨在提出一种基于深度学习的模型,解决人体关键点检测任务中存在的诸多问题,提升检测效果。同时,分析这两种任务具体的区别与相似性,从而使用迁移学习的方法将本文提出的模型应用于心脏关键点定位的任务中。在心脏关键点定位的研究中,基于深度学习的方法相对较少。但是在人体关键点检测领域,基于深度学习的方法层出不穷。所以本文,首先从人体关键点检测任务入手,分析深度学习模型的演变。该任务目前主要存在人体关键点尺度差异性问题和冗余信息干扰问题。针对前者,本文引入目标检测领域中流行的特征金字塔网络(Feature pyramid network),通过在多尺度的特征图上提取特征并将高层语义特征与底层图像特征融合的方式解决此问题。针对后者,本文将设计一种以掩膜(Mask)表示的注意力模型(Attention model)并将其融入网络结构中。注意力模型被广泛的用于图像描述,图像识别等领域,其目的是模仿人类视觉系统中对主要任务投入更多关注和对冗余信息进行过滤的机制。本文在每个改进后都设置了对比实验以验证假设。最终提出了一个新模型——特征金字塔注意力沙漏模型,其在MPII和LSP人体关键点检测数据集上取得了目前最好的检测效果。本文最后部分分析了心脏关键点定位与人体关键点检测任务的区别与联系。而这些区别与联系正对应于迁移学习可解决的问题和基本原理。随后,使用基于模型的迁移学习方法将新模型应用于心脏关键点定位的任务,并设计对比实验验证模型效果。实验显示,新模型同样在心脏关键点定位任务中取得了目前最好的效果。特征金字塔注意力网络模型在人体关键点检测和心脏关键点定位两个任务中取得了良好的效果,有助于相关领域的发展和医疗技术的进步。
其他文献
研究目的:结合吴江单轨交通的工程实际情况,从桥梁的角度出发,研究跨座式单轨和悬挂式单轨的技术特点及适用范围,分析单轨交通的结构体系,根据不同的材料确定合适的截面形式,剖析下
全球化背景下,国际贸易对具有不同专业化分工的国家影响有所差异,对此进行研究有重要的理论及现实意义。基于此,以产业分工存在显著差异的中日两国为研究对象,在2007年中日国
植物种群结构与动态作为种群生态学研究的重要内容,对不同地区种群结构与动态的研究不仅可以反映种群的生存现状,而且可以展现植物与外界环境相互作用的结果,对植物资源的保
传统信息采集系统通过不定点定位进行船舶信息采集,受到磁干扰影响,信息采集频率较低,并出现了信息采集效果较差的问题,为了解决该问题,提出了基于无线传感器网络的船舶信息
介绍了矿井瞬变电磁法的基本原理、施工与资料解释方法,并结合其在某矿9105工作面煤层顶板老空水异常区探测中的应用实例,对探测效果及应用前景进行了客观评价.
新中国成立之初,全国能通车的公路仅8.08万公里,而到2018年末,全国公路总里程已达到484.65万公里。70年来,一个走向现代化的综合交通运输体系正呈现在世界面前……条条高速遍
目的了解留守儿童社会支持与自我意识的状况及其关系,为开展心理健康教育提供科学依据。方法采用青少年社会支持评价量表和儿童自我意识量表对甘肃省1 152名学生进行问卷调查
利用惠更斯-菲涅尔衍射积分公式导出了部分相干平顶高斯光束(PCFGB)经过ABCD光学系统的传输公式。进一步导出了PCFGB经透镜聚焦后的任意z处、焦面处、聚焦场轴上的光强分布公式
要在稳定中推动改革和发展,以改革和发展来保持社会的长治久安。这是党中央反复强调的一个十分重要的问题。各级干部特别是中高级干部,应该对这个问题予以高度重视。关于维护