自然场景下行人检测与人体姿态估计方法研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:long840223
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
行人检测和人体姿态估计是计算机视觉领域备受关注的研究方向。行人检测是通过对图像或者视频中的行人特征进行分析,检测出行人所在的区域。人体姿态估计是对图像中人体各个关节点的位置进行定位,人体姿态估计也是人体动作行为识别与分析的基础。本文采用了基于卷积神经网络的方法对行人检测和人体姿态估计进行研究。本文的主要内容如下:(1)研究了经典的Faster R-CNN目标检测算法,该算法在通用的目标检测任务中已经达到了较高水平,由于行人检测与通用的目标检测有相似性,本文将Faster RCNN算法应用到行人检测任务中,在Caltech行人数据集上进行测试并和几种经典的行人检测方法对比。基于Faster RCNN的行人检测方法在“Reasonable”指标下的漏检率达到了 23.3%,大尺度行人的漏检率为7.4%,中、小尺度行人的漏检率分别为62.2%和96.1%,实验结果均优于一些经典的行人检测方法。(2)基于Faster R-CNN的方法对于尺度较小的行人检测效果并不理想。针对这个问题,提出了多层特征融合机制,将低层和高层的特征图进行尺寸缩放和信息融合,充分利用了对小目标物体至关重要的低层特征图,“Reasonable”指标下漏检率降低为21.6%。之后,修改了行人候选框和感兴趣池化区域的尺寸,使它更适合行人的特点,“Reasonable”指标下的漏检率降低约20.5%。最后,针对行人检测中存在的难分样本问题,提出了将多任务损失函数替换为焦点损失函数,加大模型训练过程中对难分样本的权重,“Reasonable”指标下的漏检率约17.4%,中、小尺度的漏检率也有所降低,改进后算法的性能得到了提升。(3)研究了卷积姿态机的算法原理,该算法使用全卷积网络对输入图像进行特征提取,得到一系列人体关节点的热点图,使用平方误差损失函数训练整个网络。针对卷积姿态机的模型体积较大难以移植到移动端等问题,使用轻量级网络MobileNet的思想对网络进行改进,模型的体积由124Mb降低为19Mb,之后,在卷积姿态机的基础融合残差预测模块,模型的准确率达到83.1%,改进后的算法相对于原文的模型来说,模型的准确率有所降低,但是体积大幅减小,基本可以实现移植到移动端。
其他文献
机器人不再局限于结构化环境下完成传统工业生产,而是逐渐从封闭作业空间中解放出来,进入非结构化环境,与人共融并协同作业。传统的工业机器人高刚度关节具有出色的精准定位和抗干扰能力,但缺乏缓冲和吸能储能功能,若直接用于非结构化环境的协作作业,容易与周围的物体及人接触碰撞,造成机器人本体可能被强烈冲击所破坏,甚至对周围人员造成致命伤害。为了解决非结构环境下的人机协作过程中的安全问题,将机器人关节变得柔顺是
目的:从肿瘤大小、肿瘤标志物、中医证候积分、体力状况评分(KPS)、不良反应及安全性方面观察阳和汤治疗脾肾阳虚型晚期肺腺癌的临床疗效,为阳和汤治疗晚期肺腺癌提供临床依据。方法:将符合条件的56例中晚期肺腺癌患者随机分为治疗组28例、对照组28例。对照组吉非替尼口服,治疗组服用方法同对照组,在其基础上配合口服中药阳和汤。经过2个周期的实验,观察两组在肿瘤大小、肿瘤标志物、中医证候积分、KPS、不良反
随着时代的发展,为顺应工业化和城市化的要求,工程机械与建筑用钢的需求量有了大幅度的增加,高强钢的作用日益突出。在工业发展和可持续发展并行的大环境下对钢铁材料有了新的要求。综合各方面的考量,微合金化已经成为高强钢的必然趋势。其中微合金元素的强化作用较为显著。采用Nb、V、Ti微合金化可获得具有高性能的低合金高强钢,这些钢可在相对低的成本上达到良好的综合性能,广泛用于船舶桥梁、压力容器、石油套管等领域
近些年来,传染病仍旧是危害人类健康的重要疾病之一。传统传染病的持续流行以及新发传染病的出现给人类敲响了警钟,人类与传染病的斗争远远没有结束。因此,对传染病传播机理的研究十分具有理论和实际意义。通过建立传染病动力学的数学模型来研究传染病,人类能够更加深入了解并解决其带来的危害。而对传染病模型的吸引域的研究因其在预测以及防治传染病方面的重要意义成为了近年来传染病动力学领域专家和学者的重要研究课题之一。
减压器是通过高压气体经减压器一级进气口管嘴进入减压器内腔,活门在给定进口压力、弹簧的合力、补偿面积在气体作用下产生的补偿力、胶圈摩擦力及出口压力共同作用下使活门开启一定高度,高压气体经过活门与壳体内孔尖边形成的狭窄的环形面积通道时节流降压,同时部分气体经反馈孔进入低压腔,调节输出压力精度。随着入口压力降低出口压力也随之下降,力的平衡被打破,作用在活门杆反馈面积上的向下的力(即使活门关闭的力)减小,
青铜容器是先秦至两汉时期历史文化的重要载体,是古代历史文化研究中不可或缺的基础材料。秦汉以来,青铜容器的地位已远不如夏商周时期重要,青铜容器的类别与组合不断变化,各个区域对青铜容器的接纳与使用并不平衡。本文以青铜容器不同使用功能作为基本的分类依据,将研究的范围限定在两汉时期司隶地区,构建青铜容器发展演变的年代序列及区域特征,并根据器物组合与分布情况探讨两汉时期不同阶段青铜容器使用人群的社会身份构成
随着时代的进步和发展,社会对人才有了更高的要求,我国的教育理念也在朝着多元化、开放性方向发展,教育建筑的设计更加注重教育理念与教学模式、教学行为等对空间的需求。高校的教学空间需要更加多元化、智能化、多义性和创造更多开放、交流性空间。而这些需求归根结底,是由教育理念的更新来引导的。因此高校公共教学空建筑空间的设计一定要符合当前国家多元化的教育理念。本文从我国当前多元化的教育理念角度出发,通过对教育理
现有各种观测都支持宇宙学常数模型(∧CDM),但是∧CDM作为一个6参数模型去描述包括宇宙的膨胀历史和大尺度结构形成在内的整个宇宙的演化,总是让人难以置信。而且,目前还存在一些问题没有解决,例如不同观测对哈勃常数测定不一致的问题和现有宇宙学观测中存在参数简并的问题。这些问题的存在让我们意识到,宇宙学模型和宇宙学观测可能存在局限性,所以需要对模型和观测做进一步的扩展提升。引力波标准汽笛作为一个新的宇
针对复杂非线性系统机理不清难以依据传统机理法建立数学模型的问题,本文提出基于系统非线性有源自回归(Non-linear Autoregressive with Exogenous input,NARX)模型的非线性系统动力学响应建模方法来解决。NARX模型是一种多项式形式的数值模型,因为其结构简单,普适性好,鲁棒性强,构建容易,能反映真实系统特性等特点,在诸如冶金,机械,医疗等的许多领域得到了广泛
如今抽油机类型还是以游梁式抽油机为主,但游梁式抽油机驴头部分容易出现销轴磨损以及裂纹现象的产生,而这种现象的出现会导致抽油机工作效率的降低以及潜在的作业风险,为了避免人工观察其是否出现故障现象,所以开发针对此问题的监测系统,解决人工检测容易出现的作业风险,用监测系统通过多点监测互相校正与对比,能够更加全面准确监测其运行状态。在监测的基础上还深入研究其不同故障的信号特征,通过比较信号特征对抽油机当前