基于模型融合的头部姿态估计

来源 :河北农业大学 | 被引量 : 0次 | 上传用户:ww5118529
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
头部姿态估计是指利用机器视觉和模式识别技术对输入的静态图像或者视频中连续的帧图像进行分析,进而预测人的头部在三维空间中的位置及姿态参量,是计算机视觉领域研究的热点课题之一。其中姿态参量指的是图像中人的头部在三维空间中的三个旋转角度,分别为偏航角(yaw)、俯仰角(pitch)和平面内旋角(roll)。头部是人类重要器官之一,能够表达人的注意力方向和行为信息,因此头部姿态估计对人类行为研究和分析具有重要意义,在人类的日常生活和工作中具有广泛的应用前景。本文首先研究了近年来头部姿态估计相关的方法,发现越来越多的人选择通过采取更有效的卷积神经网络、不断优化模型损失函数和利用更有效的数据增强方法等方式来提升头部姿态估计的预测性能。但预测性能会受到人脸区域参数设置、数据集规模和图片中光照、遮挡等因素的影响。针对以上问题,本文提出了一种基于模型融合的头部姿态估计方法。本文的研究内容和创新点如下:(1)人脸区域尺寸聚类。通常头部姿态估计研究方法中采取设置固定的尺寸和比例来模拟人脸区域的尺寸与比例。本文采取K均值聚类的方法对训练样本中人脸区域的尺寸进行聚类,得到9组聚类结果,然后将得到的9组聚类结果作为模型参数来模拟人脸区域的尺寸和比例。本文采取的方式能够更好的模拟不同姿态情况下人脸区域的真实情况,可以加速模型收敛过程。(2)数据集扩充。为了使模型在数据样本量较少的数据集中能够进行充分的训练,在原有数据的基础上,采取随机改变图像亮度和对比度、随机裁剪和随机缩放等方法对数据集中的样本进行数据增强,将样本数量变为原来的两倍。此外,采取交叉验证的方式进行实验,以多次测试结果的平均值作为交叉验证的最终预测结果,能够充分利用数据集中的样本,并在一定程度上减小过拟合。(3)模型融合研究。通常的头部姿态估计方法为先进行人脸检测再进行头部姿态估计两阶段模型,此类方法的各阶段过程之间存在耦合程度高、误差累积严重的问题。针对以上问题本文提出了一种基于模型融合的头部姿态估计方法。首先,利用主干网络对输入图片进行特征提取,输出三种不同尺度的特征图;然后,利用检测网络对主干网络输出的三种尺度的特征图进行人脸区域检测和头部姿态估计并输出人脸区域和头部姿态的预测结果。其中,在检测网络中实现了对于不同尺度特征图的融合,使得融合后的特征图既包含高层特征图中丰富的语义信息,又具备低层特征图中能够进行高精度检测的特点。(4)模型验证。为了验证本文方法的有效性,在CAS-PEAL-R1的姿态子集和Pointing’04这两个开源数据集上进行实验,在CAS-PEAL-R1的姿态子集中取得99.23%的预测准确率。此外,还对视频中的图像进行人脸区域检测和头部姿态估计。实验结果表明,在头部姿态估计问题中,本文方法优于目前其他的一些主流方法,在头部姿态预测结果的准确性上有了较大提升,并且对于从真实环境中获取的图像能够进行准确的预测,验证了本文方法的实用性和鲁棒性。
其他文献
过去的扶贫政策是全国统一的大水漫灌,盲目给贫困户输血,贫困户脱贫成效不大,造血功能不强。2014年,我国开始实施根据各个贫困户具体情况制定不同脱贫方案的“精准扶贫”政策。经过多年的努力,我国在2021年2月完成了消除绝对贫困的艰巨任务。其中产业扶贫发挥了重要作用,有效推动了贫困人口增加收入。肉羊产业由于其养殖技术含量低、投入成本相对较低、易于管理等特点,成为了产业扶贫中的重点项目。但是肉羊养殖过程
学位
河北省是甜瓜种植大省,甜瓜产业的产销规模在全国范围内均处于领先地位,2019年河北省甜瓜产量位居全国第四,甜瓜产业在推动农民增收方面起到了重要的作用。随着河北省甜瓜特优区的逐步建立,河北省甜瓜产业发展更加迅速,各类新型经营主体均把甜瓜当作主要种植的农业经济作物。由于各类甜瓜生产新型经营主体的经营规模各不相同,导致其在农业产销过程中的组织运营模式也不尽相同。分析不同类型新型经营主体的组织运营模式的特
学位
21世纪以来,调整经济增长方式,实现绿色发展成为我国农业高质量发展的目标。当前,农业生产大多以传统粗放型生产方式为主,长期依赖化学产品投入,片面追求产量增长,农业面源污染依然严重,农产品质量无法得到保证。为此,2015年农业农村部印发了《到2020年化肥使用量零增长行动方案》和《到2020年农药使用量零增长行动方案》,鼓励农户采纳有机肥替代化肥技术和病虫害绿色防控技术,实现化肥农药减量增效。蔬菜产
学位
在乡村振兴战略的指引下,休闲农业成为推动乡村产业兴旺、农户增收的重要切入点。近些年,河北省政府致力于休闲农业的发展,通过优化休闲景区、开设精品线路、推进产业融合、延伸农业产业链,使农业总产值逐步提升,农民收入不断增加,农民就业率稳步提高,农业设施日益完善,农村经济持续发展。在这样的背景下,对本选题进行了研究,旨在量化河北省休闲农业对农业总产值、增加就业、促进增收、带动农村相关行业发展方面的贡献,为
学位
在供给侧结构性改革的大背景下,消费成为经济增长的主要驱动力,如何发挥消费对产业升级的带动作用成为推动发展的重点。河北省作为羊肉的生产与消费大省,在羊肉高端品牌的建设方面存在短板,自身核心竞争力尚未形成,难以占据高端消费市场。虽然品牌经济在市场经济中发挥了促进消费的重要作用,但在品牌羊肉消费中仍存在消费者的消费意愿没有得到充分转化的问题。因此本文着眼于河北省居民的品牌羊肉消费意愿转化率,既利于提高河
学位
病程相关蛋白(pathogenesis-related proteins,PRPs)是植物在病理或病理相关的环境下诱导产生的一类低分子抗菌物质,属于植物防卫反应基因家族成员,在植物系统获得抗性(Systemic Acquired Resistance,SAR)中发挥着重要作用。本课题组前期明确小麦TaPR1、TaTLP1基因受植物激素水杨酸(salicylic acid,SA)、脱落酸(absci
学位
七星瓢虫Coccinella septempunctata L.隶属于鞘翅目,瓢虫科,具有分布范围广,捕食种类多的特点,是蚜虫、介壳虫、粉虱等多种害虫的天敌,在生物防治上有着重要的作用。昆虫是变温动物,温度是影响昆虫生长发育的重要气候条件之一。随着全球气候变暖,极端高温(>35℃)事件频发,这对昆虫的生长发育产生了很大影响。本试验模拟田间高温发生情况,设置4种极端高温模式(36℃1d×6h/d、3
学位
根据实验室前期研究结果,核桃雄花具有丰富的营养物质,但其容易褐变,而多酚是引起褐变的重要物质之一。本研究采用超声辅助提取法提取核桃雄花中多酚类成分,并通过大孔树脂吸附法对核桃雄花多酚粗提物进行富集纯化,同时结合超高分辨液相色谱质谱(UHPLC-MS/MS)技术分析核桃雄花中多酚类化合物的具体结构,对分析出的单酚进行稳定性研究,从而为多酚对核桃雄花褐变的影响提供一定的理论指导。主要研究内容包括:1.
学位
<正> 一、"宪法演变"(或称"宪法变迁)和"宪法修改"是两个具有特定涵义的概念。"宪法修改"是指经有修宪权的国家机关(在中国是全国人大),遵循修宪的程序,通过补充或变更宪法的某些形式要件(包括序言、结构、条款、语词等等),对宪法内容作出变动。这是正规的修改宪法,属于"明示修改"。另有一种是"默示修改",即对宪法原文不作任何变动而是通过释宪程序,以宪
期刊
抑郁症是当今十大心理疾病之一,据世界卫生组织统计,目前全世界约有超过3.5亿人群患有这种疾病。迄今用于治疗抑郁症的药物通常药效不佳,且有明显的副作用。近几年,大量研究表明肠道微生物失调与抑郁症的发生有着密不可分的关系,而功能性食品或益生元的补充可以重塑肠道菌群,有效缓解抑郁样行为,给抑郁症的治疗提供了新方向。牛磺酸是哺乳动物组织中的游离β氨基酸,介导多种生理功能,包括膜稳定、心肌调节、维持钙稳态、
学位