基于堆叠沙漏网络的人体姿态估计研究

来源 :贵州大学 | 被引量 : 0次 | 上传用户:ghostbyte
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人体姿态估计的目的是识别并定位出人体的关键点,这些关键点按照人体关节顺序相连就可以得到人体的躯干,进而得到人体的姿态。但是现存的方法在处理较大的姿势变形,部分遮挡和复杂背景等这些场景下的效果仍然不是很好。在人体姿态估计中,依然存在对困难关键点的错检、漏检,存在姿态估计的模糊性问题,而且在常用的公开数据集中较大的姿势变形、部分遮挡和复杂背景等场景下实例较少。本文针对这些核心问题展开研究工作,本文的主要工作及贡献如下:(1)基于堆叠沙漏网络,本文提出了一种级联特征融合的堆叠沙漏网络算法。由于堆叠沙漏网络存在局限性,关键点上下文信息提取不足以及重复上下采样导致的信息损失,而浅层特征对于人体姿态估计更为重要,因此本文从充分提取和利用浅层特征这一角度出发,在原堆叠沙漏网络的基础上加入了大感受野残差模块、预处理模块并设计了一个横向连接结构。实验结果表明,级联特征融合的堆叠沙漏网络算法提高了人体姿态估计的精度。(2)针对人体姿态估计中的模糊性问题,提出了一种结合人体解析的人体姿态估计方法。人体解析就是将语义分割技术作用于人体,对身体各部位进行分割,人体解析的结果可以提供关于人体形状的有用的线索,同时身体部位分割可以约束关键点的位置,将获得的人体解析信息与结构信息相结合,有效纠正了在人体姿态估计中的模糊性问题。(3)针对常用公开数据集中较大的姿势变形、部分遮挡和复杂背景等场景下的实例较少的问题,本文使用语义数据增强方法来模拟真实情况下的遮挡,合成遮挡情况下的实例。通过上述的人体解析方法对人体进行语义分割,然后随机选取身体部件放置到图片里来模拟遮挡的情况,并以对抗性学习的方式动态调整网络的增强参数,针对姿态估计网络生成定制的训练样本,进一步提高了人体姿态估计中对遮挡关键点的检测精度。
其他文献
药物成瘾是一种大脑神经结构改变的慢性疾病,对个人和社会造成了严重的危害。定量描述药物成瘾对大脑微观结构的影响,进一步发现成瘾的神经生物学原因,将为药物成瘾机制的揭示以及探寻有效戒毒方法提供一种重要的辅助手段。磁共振扩散成像(Diffusion magnetic resonance imaging,d MRI)技术已被证实是临床诊断和研究神经组织微观结构的有效成像方法,可以帮助研究人员了解疾病的神经
学位
增强现实技术将计算机生成的虚拟信息加入到真实环境中,这需要满足光照一致性、几何一致性和时间一致性,以提高虚拟信息和真实世界融合的视觉一致性。增强现实技术的光照一致性需要估计整个真实场景的光照分布,从而准确渲染虚拟物体插入到真实场景中。本文针对增强现实中的光照一致性问题,做了如下工作:1.首先针对在各种条件拍摄的彩色图像难以满足光照估计任务需求,提出了融合多分支残差与仿射变换的低照度图像增强方法。该
学位
本篇论文主要研究的是自相似网络上的随机游走问题.粒子在网络上的随机游走是网络动力学研究方向之一,平均捕获时间是衡量粒子传输效率的重要指标,因此计算平均捕获时间具有非常重要的意义.基于两种自相似网络模型(三级Sierpinski垫片网络和菱形层次网络),采用不同的视角来研究粒子在其上的捕获问题.一方面,对于三级Sierpinski垫片网络,我们考虑了粒子在其上同时进行邻近跳跃和非邻近跳跃两种游走方式
学位
随着能源互联网技术的发展,配置了风力发电机、光伏发电及储能装置的能源用户,从消费者变成了产消者,使它们增加了对外输送能源的能力,从而形成了地域分散的分布式能源结构。如果采用传统集中式的能源交易模式,虽然便于能源管理和易于设置,但也存在一些问题:其一,中心化机构可以从服务器中直接读取用户的能源交易数据等隐私信息,且存在单点故障;其二,分布式能源节点具有间歇性(如风能和光伏)、随机性(在发电计划之外)
学位
密文策略属性加密方案(Ciphertext-policy Attribute-based encryption,CP-ABE)是一种灵活的访问控制方式,方案基于用户角色的属性,数据拥有者通过制定访问策略来加密数据信息,而需要访问数据的用户只需要满足数据对应的访问策略就可以实现对数据的访问,这样的访问模式使得密文策略属性加密非常适用于现有数据存储环境。随着量子计算机的出现,使用传统数论问题构造的密码
学位
一直以来,描述多组分Bose-Einstein凝聚态之间相互作用以及多个物种竞争的非线性偏微分方程组中,解的空间渐近行为-共存或消亡,都是微分方程界研究的热点话题.近年来,人们对强竞争导致的解的相分离现象表现出极大地兴趣.在竞争参数趋于正无穷的奇异极限问题中,解的支集相互分离,因而极限问题是一个自由边界问题.许多著名数学家包括沃尔夫奖获得者美国数学家Caffarelli,我国著名数学家林芳华,澳大
学位
由于贵金属具有良好的规避风险和套期保值的作用,在通货膨胀或者危机时期,为了避免货币购买力的损失,贵金属往往成为投资者竞相追逐的对象.当前,随着新冠肺炎疫情在全球范围内的不断蔓延,国际经济形势整体表现不佳,包括贵金属市场在内的金融市场波动剧烈,市场之间的价格联动性和风险溢出效应显著增强.在此情形下,研究贵金属商品价格的动态关联和相互关系对于了解贵金属市场的复杂特征,防范贵金属市场的金融风险,为市场投
学位
本文共分为五个章节,主要讨论Laguerre多项式的递推关系,同时给出一个新的广义Laguerre多项式的递推关系.此外,本文研究了广义Laguerre多项式与Appell序列的性质,并给出二者之间的一个关系式.第一章为引言.本章分为两个部分,第一部分主要介绍Laguerre多项式和Appell序列产生的知识背景.第二部分介绍本文的主要结论和内容结构.第二章讨论了基础知识.本章分为两个小节,第一小
学位
本文研究了非局部扩散方程的Fisher-KPP问题,ut=J*u-u+f(u),t>0,0<x<h(t),其中u在[0,h(t)]的两端分别满足Dirichlet固定边界条件和Stefan自由边界条件.在生态学领域,此模型可以用来描述新物种或入侵物种的扩张问题.我们给出了全局解的存在唯一性,扩散-消逝的二择一性,扩散发生的充分条件,以及扩散发生时自由边界的渐近速度的估计.首先,在一个半无界区间上构
学位
传统的事件抽取只关注固定的事件类型。然而,在案件分析中,需要获取所有可能的事件。在前期工作中,我们将谓语中心词作为事件的触发词,抽取案件中所有可能的事件。由于相同的谓语动词可以触发不同类型的事件,不同的谓语动词又可以触发同类型事件,加上近义词、同义词的影响,使得面向事件的司法分析面临很大挑战。为了有效支撑智能司法的各种底层任务,例如:司法数据分析、司法数据检索和司法事理图谱构建等,本文主要研究面向
学位