基于卷积神经网络的人体行为分析与识别

来源 :浙江理工大学 | 被引量 : 0次 | 上传用户:youling0186
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
卷积神经网络技术在计算机视觉领域中发挥着越来越重要的作用。基于卷积神经网络的人体行为分析与识别算法主要通过目标检测技术、人体骨骼关键点检测技术和人体行为分类网络技术对视频和图像中的人体目标进行定位、行为分析与行为识别。本文研究内容由浙江省重点研发计划项目——基于“智能亚运”等重大活动公共安全需求的关键技术、装备研究及应用示范项目课题支持。由于监控摄像头和人体目标之间存在一定距离和角度,导致监控图像中人体目标的定位精度比较低。同时实际场景中人体目标之间会相互遮挡,人体目标的骨骼关键点检测会比较困难,这也是一个比较棘手的问题。针对以上问题,本文提出一种基于卷积神经网络的人体行为分析与识别算法。首先利用基于卷积神经网络的目标检测算法检测视频图像中的人,然后利用人体骨骼关键点检测算法对被检测到的人体目标的骨骼关键点进行定位,最后由人体行为分类网络对人体目标的骨骼关键点信息进行分析,并识别出图像中人体目标的行为。本文提出的主要创新点如下:(1)针对图像中人体目标的尺度多样性,本文提出了Re-Bi FPN特征融合方法提升多尺度特征融合效果。在级联网络中引入Re-Bi FPN特征金字塔结构,构建递归的连接方式将Bi FPN中的各层特征图融合到主干网络的输出层中,进一步实现跨尺度的连接和特征的加权融合。(2)针对人体目标之间相互遮挡的问题,本文提出了Rep-CIo U Loss。Rep-CIo U Loss充分考虑了多个预测框之间的中心点距离以及不同目标之间候选框的距离信息。充分考虑预测框之间的中心点距离可以防止多个预测框之间因距离太近而被NMS算法过滤掉,进而减少因遮挡而产生的漏检。(3)针对现有的人体骨骼关键点检测算法准确率低的问题,本文提出了基于多级HRNet的人体骨骼关键点检测算法。并提出了M-RFB模块,利用浅层特征高分辨率和高层特征的高语义信息提升检测效果。在整个骨骼关键点检测过程中始终保持高分辨率表述,并在每个子网中采用多尺度融合。(4)在人体行为分析阶段,本文提出了构建基于卷积神经网络的人体行为分类网络。利用人体骨骼关键点检测阶段得到的17个骨骼关键点信息计算关键点之间的距离和角度特征,并利用距离和角度特征对人体行为分类模型进行训练。本文提出的行为分析算法总的准确率达到了98.7%。本文提出的基于卷积神经网络的人体行为分析与识别算法能够有效提升监控视频中人体目标的检测精度、人体目标骨骼关键点的定位精度以及人体行为识别的准确率。
其他文献
1,2,4-三氮唑是一类广泛存在于天然大分子以及药物分子中的结构单元。三氟甲基因其特殊的C-F键,引入母体分子后可以优化母体本身性质。因此近年来三氟甲基取代的1,2,4-三氮唑的合成方法与应用备受关注。与常规的1,2,4-三氮唑相比,三氟甲基取代1,2,4-三氮唑的高效合成方案较少被报道。三氟乙酰亚胺肼作为一种由三氟甲基亚胺氯衍生得到的三氟甲基合成子,具有制备简单、结构稳定、底物广泛、反应活性高等
学位
大曲率扩压弯道是离心式叶轮机械中无叶扩压器、弯道和回流器等固定部件的简化模型,弯道内流体会呈现出二次流、流动分离及再附等复杂形态。目前的研究多集中在二维弯道或三维等截面弯道及入口速度固定的简化模型上,而在实际情况中,弯道的高度和通流面积会发生变化,同时其内部流动受到上游叶轮出口处周向通过的“射流-尾迹”结构的扰动。这些固定部件内流动分离的时空演化特征影响了下一级内部流动特征,甚至会影响叶轮机械的性
学位
我国农作物深受农业害虫危害,给国家造成了不可估量的经济损失,因此,对农业害虫种群动态进行实时的监测和及时、有效的防控是确保粮食安全的前提。性诱测报是广泛应用于农业害虫监测的一种重要手段,具有很强的灵敏性和专一性。目前,基于机器视觉的性诱捕器可以将测报人员从识虫和计虫的任务中解脱出来,已成为害虫智能监测研究的热点。但利用性诱捕器拍摄的性诱粘虫板图像存在图像背景复杂、害虫粘连、相似非目标害虫干扰等问题
学位
制备具有节能环保特性的高效分离或吸附材料是目前水处理领域的研究重点之一。离心-静电纺丝是一种优良的纳米纤维制造技术,通过离心-静电纺丝可以得到由纳米纤维堆砌而成的高比表面积与高孔隙率的纳米纤维膜,经后处理可应用于高强度复合材料、电子器件制造、药物传递、食品包装、膜过滤和能源应用等领域。聚乙烯醇(PVA)作为一种水溶性多羟基环保型高分子聚合物,自身无毒无污染的同时,其溶剂为水,且具有优异的成膜性能,
学位
为保护海洋生态环境,国际规定船舶的排放气体必须减少硫化物等有害物质的排放,因此大型远洋油轮中常用脱硫塔对废气进行净化处理。脱硫过程中,输送参与反应的海水需要消耗大量的能源,直排废弃海水又会造成严重的能源浪费。考虑船舶的经济成本因素,采用液力透平对余压丰富的废弃海水进行能量回收的方法在行业中得到普遍的认可。目前,单吸透平能够适应绝大多数工况,实现能量的高效回收,然而在船舶脱硫工艺中超大流量、极低水头
学位
卡马西平作为一种抗癫痫药物,由于其生物降解性差,在废水中经常被检测到。光芬顿技术由于绿色、高效被广泛应用于处理难降解废水,MIL系列Fe-MOFs材料具有优异的可见光捕获能力和高度分散的铁活性中心被认为是光芬顿催化剂的潜在选择。然而大多数铁中心被有机连接物完全占据,使其不能用于活化H2O2。原始Fe-MOFs在光催化过程中面临着光生电子-空穴对快速复合的问题,所以抑制电子-空穴对的复合对于提高材料
学位
目前,有机发光二极管(OLED)已经实现了产业化,相对于其它的显示设备,OLED具有自发光、低起亮电压、广色域、广视角和结构超薄等优势。而在产业化进程中,OLED的成本一直居高不下,严重限制其了发展。原因主要有两方面:其一,发光层材料的分子结构复杂,合成成本及提纯成本较高,而且有些前驱体材料也是价格不菲;其二,目前器件的制备工艺以真空蒸镀为主且大部分发光层均为掺杂结构,这无疑增加了工艺难度及生产成
学位
本翻译实践报告(日译汉),选自日本法政大学出版局于1976年出版的日本比较文学学者、翻译理论学家柳父章的《何谓翻译——日本语与翻译文化》。全书通过引入“カセット効果(宝匣效应)”的概念,深入分析了日本明治时期以来“翻译语(翻訳語)”——“权(権)、自由(自由)、他(彼)”出现的社会历史背景以及Society的译词诞生过程。本翻译实践报告节选自该书的第一章节“论‘宝匣效应’(「カセット効果」の説)”
学位
聚丙烯(PP)因其价格低、易加工、耐化学腐蚀、电气绝缘等优点而被广泛应用于医疗、工业和日常生活等领域。然而PP具有很高的可燃性,且其在燃烧过程中通常会释放大量毒烟并产生高温熔滴,这会严重危害生态环境和人类生命财产安全,从而极大限制了 PP的进一步开发应用,因此须对PP进行阻燃改性。出于保护生态环境和人类生命的考虑,燃烧时会分解出具有毒性和腐蚀性气体的卤素阻燃剂已被禁用,逐渐被安全、环保的无卤阻燃剂
学位
彝族鸡冠帽别具一格,独具特色,历经岁月沉淀传承至今,是历久弥新的最好体现,凝结着彝族历史底蕴,是中华民族文化瑰宝。彝族鸡冠帽上的图案也独具魅力,不论是自然界中各类动植物图案,还是人为创造出来的用来装饰的几何图案,在漫长的历史发展中,都形成了自己独特的表现形式。彝族鸡冠帽既是一种具有代表性的文化信息载体,也是一种承载着不同时期审美演变的特有文化符号。彝族鸡冠帽在彝族物质和精神文化的熏陶下,呈现出多姿
学位