基于RGB-D的人员检测与双向人流量统计方法的研究与实现

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:csharpguy2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
智慧建筑是一种目前正在高速发展的建筑形式,其利用人工智能、物联网、云计算等现代信息技术,整合并分析建筑内各项与人员相关的数据,并依据可靠地大数据分析和推理,为室内人员的工作和生活提供便捷、高效、人性化的服务。智慧建筑以人作为服务主体,建筑内部的人员位置和人流量数据对于分析门店客流量、人员分布、运动规律以及拥挤预警具有重要的参考价值,因此针对建筑室内环境开展人员检测和人流量统计的研究具有重要意义。现阶段的人员检测和人流量统计技术多基于可见光图像展开,在室内复杂的场景中,人员易受到频繁遮挡、光照变化、多尺度、多姿态以及相似背景等因素影响,导致人员检测和人流量统计仍是一项极具挑战性的任务,仅利用单一可见光图像特征的方法已经难以克服不同场景对人员检测的限制。相比较于传统可见光相机,深度传感器对光照变化鲁棒性强,并且能够将物体到相机的距离反映到深度图像上,从而计算物体之间的位置关系,为解决频繁遮挡、光照变化以及复杂背景提供了新的处理思路。本文的研究内容具体包含以下两方面:(1)基于非对称自适应特征融合的RGB-D人员检测算法。该算法融合多模态数据以实现室内人员的准确检测与定位。该算法首先利用卷积特征可视化的结果分析RGB和深度模态之间的特征差异,设计一种非对称型RGB-D双流网络结构,在降低双流网络复杂度的同时,能够权衡不同模态数据的特异性。然后结合深度图像的上下文特征构建深度特征金字塔,称为Depth-FPN,实现可见光图像特征和深度图像特征在指定层级上的多尺度融合,提升算法对不同尺寸目标的适应能力。最后在多模态特征融合阶段引入一种自适应RGB-D通道加权模块(Adaptive Channel Weighting,ACW),其可依据各通道的重要性使网络自主学习对RGB-D特征通道进行加权重组,实现对多模态特征的高效选择和信息互补。(2)融合场景深度信息的双向人流量统计算法。该算法利用深度信息优化跟踪匹配策略和判断人员运动方向,从而实现人员的稳定跟踪和人流量的准确统计。该算法首先利用所述RGB-D人员检测结果初始化多目标跟踪器,然后采用基于深度信息改进的Deep Sort算法实现人员目标的关联匹配,提出一种基于边框交并比(Intersection over Union,IOU)和深度变化率联合约束的目标匹配策略,结合目标的位置相似度和深度相似度优化目标匹配,平滑决策边界以降低匹配错误率和丢失率;提出一种基于轨迹上下文的深度差的目标遮挡判断策略,判断目标在当前帧的遮挡状态,并依据遮挡状态优化轨迹处理策略以应对人员遮挡。最后提出利用三维质心坐标判断人员在当前时刻的运动方向,实现对横向、纵向经过计数线的人员进行双向计数,同时结合人员起始位置和辅助计数线,处理人员折返等异常运动状态,减少重复计数和错误计数的发生,提高双向人流量统计的准确率。本文在办公区、商铺、餐厅、走廊等多个室内场景数据集下验证算法性能,并设置了低照度场景和频繁遮挡场景的对照实验组,验证RGB-D人员检测算法在低照度以及频繁遮挡条件下的鲁棒性。最后本文整合人员检测和人流量统计算法,设计并实现了基于RGB-D的双向人流量统计系统。实验结果表明,本文方法能够在不同限制条件下的室内环境中准确检测和定位室内人员,并对其运动轨迹和运动方向进行跟踪判断,且算法对于光照变化、频繁遮挡以及复杂背景的鲁棒性强,具有较好的实用性。
其他文献
监控视频异常事件检测是指利用计算机技术来自动分析视频序列中包含的异常事件。当出现可疑(异常)情况时,系统可以及时地检测和发出警报。该技术可以帮助监控人员有效应对危
小银厂银多金属矿床位于山西省浑源县,五台山—恒山多金属成矿区,该矿区是晋东北主要的成矿区之一,大地构造位于构成华北地台基底的东西两个陆块相互碰撞形成的区域,即华北中
盈余管理已经成为上市公司中普遍存在的一种现象,它直接扭曲了财务信息的真实性,影响了广大投资者的决策。发电行业是我国国民经济和社会发展的基础性产业,其可持续发展和国家经济命脉休戚相关,盈余质量更是备受关注。基于此,本文关于发电企业盈余管理的研究有助于规范发电企业的盈余管理行为,促进发电行业健康发展。本文以委托代理理论、信息不对称理论和利益相关者理论为基础,运用文献研究法、演绎分析法和实证研究法对我国
随着中国特色社会主义进入新时代,社会不断发展进步,当前中国的主要矛盾已成为人民群众日益增长的美好生活需要与不平衡不充分发展之间的矛盾。人民生活明显改善,对美好生活的向往更加强烈。人们的需要具有多样性、多层次性、多方面性的特点,在这些丰富的需求中,自然包括精神文化需求,而体育项目,则是其中的重要一环。CBA作为我国最高级别的篮球联赛,首先满足了球迷们可以在家门口观赏高水平篮球比赛的需求,其次推广了篮
人际信任对初中生身心健康发展具有重要的作用,是建立良好人际关系和人际交往的重要因素和基础。感恩作为一种具体的积极情绪,能够增强个体人际信任,同时对个人的成长和社会发展起到有益的推动作用。以往研究发现不同的线索条件会对人际信任产生不同的作用。因此,本研究主要探究感恩是否能够促进初中生的人际信任以及在不同目标线索和情境线索下感恩对初中生人际信任的作用是否存在差异。本研究选取乌鲁木齐市某学校初中生为被试
目的:通过随机对照试验探讨电针对肥胖症脾虚湿阻型患者静息代谢率的变化规律,为肥胖症患者的针灸临床治疗提供理论依据。方法:将2018年5月至2018年12月的符合纳入标准的48人按照进入的先后顺序,对应之前用SPSS19.0软件产生的随机数进行信封抽取法分为两组,按照1:3比例分配,其中对照组12例,电针组36例。电针组穴位:中脘、天枢、大横、水道、曲池、上巨虚、三阴交。电针操作:于双侧天枢、上巨虚
骨结核疾病,是结核杆菌以血液传播为主侵入骨或者关节组织所引起的破坏性病变。临床上针对需“取骨重建”骨结核疾病的治疗,普遍采用手术清除病灶,再进行缺损骨组织的填充,最后配合在病灶放置或长期口服抗结核药物的治疗手段。常用的骨缺损填充材料,如自体骨、异体骨等,仅起支撑作用,无法诱新组织的重建;而放置抗结核药物于病灶的方法,不能保证药物长期有效的浓度,需多次手术用药,加大了病人的治疗痛苦;口服用药也难以保
中国共产党历来重视基层民族工作。基层是社会活动的基础,基层民族事务治理可以促进民族关系的和谐发展、构筑和谐稳定的社会基础,为国家和民族的发展奠定坚实的社会基础。基础不牢、地动山摇,基层民族事务治理的重要性不言而喻。那么,进入新时代以来,中国共产党为什么要领导基层民族事务治理?中国共产党的行动逻辑为何?这是中国共产党领导基层民族事务治理研究中的一个重大命题。本研究按照“为什么、是什么、怎么办、怎么样
商业银行的蓬勃发展,对社会的稳定发展起着举足轻重的积极作用。近些年来,随着人们生活方式、消费心理和经济条件的变化,越来越多居民逐渐接受贷款消费的方式,个人信贷业务已经成为商业银行争夺其市场份额的核心业务之一。M银行是地方性的商业银行,根据科学的发展规划,个人信贷业务现已获得快速发展。但目前经营过程中存在的问题也越来越多,直接降低了M银行个人信贷业务发展质量。因此,本文对M银行个人贷款业务营销策略进
氧硒化物BiCuSeO被发现以来,因其本征热电性能具有较低热导率和较高电导率的特点引起了广大学者的极大关注。BiCuSeO本征具有独特的层状超晶格结构,这种层状超晶格结构对载流子的限域效应使材料具备大的塞贝克系数,另外层状晶体结构对声子的散射非常有利,可降低热导率,从而获得理想的热电性能。传统的热电材料制备方法具有合成时间长,工艺较为复杂,能耗较高等缺点,本文利用微波合成的优点,尝试对微波加热的机