基于人体语义分割与多尺度特征学习的行人重识别研究

来源 :北京工业大学 | 被引量 : 0次 | 上传用户:sorryhappy777
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
行人重识别是利用计算机视觉技术判断图像或者视频序列中是否存在特定行人的技术,被广泛认为是一个图像检索的子问题。旨在弥补固定位置的摄像头的视觉局限,并可与行人检测技术相结合,广泛应用于智能视频监控、智能安保等领域。由于不同摄像设备之间的差异,同时行人兼具刚性和柔性的特性,外观易受穿着、尺度、遮挡、姿态和视角等影响,使得行人重识别成为计算机视觉领域中一个既具有研究价值同时又极具挑战性的热门课题。为了进行行人重识别的有效研究,研究人员一般比较注重行人特征的提取和损失的设计。在提取特征方面,研究人员通常采用水平图像切块划分的方法让模型学习行人局部特征信息,但由于空间上存在人体和背景区域比例失衡的情况,局部特征匹配将会存在误差,从而降低行人重识别的精度;此外,语义分割也适用于行人重识别,使网络学习到行人整体的特征,但忽略了行人的局部特征,从而降低了行人重识别的精度。基于上述问题,本文从网络结构和损失函数两个方面进行研究,主要工作包括以下三个部分:(1)全局和局部特征相结合。针对现有的网络仅学习到行人整体的特征而忽略了行人的局部特征的问题,本文将多尺度水平切块划分法与行人全局和划分的局部特征相结合,使得网络模型能够适应人体姿态变化、遮挡和背景杂波等情况,学习到行人完整且具有价值的信息。(2)引入人体语义分割模型。针对两张需要匹配的图片,如果相同的空间位置对应的内容语义不同,则行人重识别技术的鲁棒性和有效性会受到制约。针对这一问题,本文在COCO Densepose数据集上训练人体语义分割模型,该模型用来生成三个行人重识别公开数据集中人体部位伪标签。同时,网络中设计新的多尺度分割模块预测人体部位标签,通过共享多尺度特征提高了行人重识别技术的算法精度。(3)采用端到端的多任务学习策略。该策略同时考虑三个损失作为子任务:基于多尺度全局和局部水平切块特征的交叉熵损失、基于多尺度全局特征的三元组损失和多尺度人体部位语义分割损失,从而提高了行人检索的准确性。本文在三个公开数据集上进行了实验,实验结果表明了所提出的网络模型在行人重识别任务中拥有较高的精度,并且该模型具有较好的鲁棒性和泛化性。
其他文献
水资源对人类生活有着重大影响,人们平日的基本需求、农业养殖、工业生产中水资源都是不可或缺的要素,同时水环境也是生态环境保护中的重要方面。目前我国地表水资源的污染问题依然严峻,为了整治水体污染开展了诸多相关的防治行动。针对污染源和水质相关性方面的需求,提出一套计算污染源对目标水质相关性的方法,该方法主要根据污染源和水质的历史排放时序数据情况来建立污染源和水质预测模型,并计算出污染源对水质的具体影响程
学位
写实油画是源自西方的一种具有着悠久的历史与传统的绘画表达方式。19世纪摄影技术的问世,对写实油画造成了一定程度的冲击和挑战,不仅促使写实油画不断确证自身的独立性,也促使写实油画开始思考摄影技术给写实油画带来的各种影响。作为一门新的独立的艺术语言,摄影艺术在学习写实油画的过程中逐渐获得了自主性,因此,写实油画与摄影艺术在各自发展的过程中,形成了相互渗透与相互借鉴中的关联性。当今,写实油画依然具有广泛
学位
近年来,中国在全球价值链的参与以及分工逐渐深入,中国企业在积极利用海外资本与先进技术的同时,也逐步具备了向海外市场拓展的实力,一批先进的中国民族企业将本国优质产品和服务推向世界市场。在“一带一路”倡议背景下,随着中国制造业的产能释放及其强劲的成本优势,同时得益于互联网持续的全球渗透,企业进入海外市场的模式也发生了深刻的变革和创新。与此同时,随着全球政治、经济、安全问题日益复杂,国际格局演变日益加剧
学位
微流控芯片是一种在微米或亚微米尺度下对流体进行精确操控的芯片,其目的是将实验分析设备微型化和集成化,以最大限度地将实验室的功能集成在一块毫米级别的芯片上。由于微流体的雷诺数小,从而产生明显的层流现象,使得不同溶液之间混合缓慢。微混合器就是快速实现微混合的微器件,是微流控芯片的重要组成部分。体声波激励的微混合器由于具有结构简单、易于操作、生物相容性好、响应速度快等优点而引起了国内外学者的注意。现有的
学位
随着科技的进步,与互联网有关的各种新兴的技术急速发展,互联网上各式各样的信息也越发的纷繁复杂,并且引发了严重的信息过载问题。通过深度学习对大量的多源异构数据进行整合,并将其与推荐系统进行深度融合,使推荐模型更加贴合用户的需求,从而提高推荐算法的性能,成为目前融合深度学习的推荐算法的一项十分重要的任务。在实际应用中,由于用户和物品的交互数据十分稀疏,算法无法高效地获取新用户和新项目的重要特征,降低了
学位
在“工业4.0”科技革命与产业升级背景下,国内外科研机构研制了形式多样的智能制造示范产线。这些示范产线不仅展示了“工业4.0”领域的前沿成果,还为相关理论研究、教育教学和软硬件产品测试提供了试验床。然而,现有示范产线受限于其规模与功能,往往无法满足面向复杂场景的生产调度问题研究。本文通过引入可重构制造系统理论,针对示范产线提出了一种生产调度可重构模型系统基础架构以及基于多智能体的可重构建模方法,并
学位
在现有的腔镜手术中,扶镜医生需要手持内窥镜,配合着主刀医生的操作实时调节内镜视野,并保持视野稳定。该作业过程耗费体力大,挤压主刀医生活动空间,浪费医疗专家资源,医院迫切需要一种机器人辅助技术,替代扶镜医生作业,在人机共融场景下完成腔镜手术。然而,由于缺少通过人机协作实现扶镜作业的控制方法,也缺乏基于术中图像引导的内窥镜自主调节方法,机器人在实际腔镜手术中的应用推广受到了制约。为解决以上问题,本文提
学位
恶性肿瘤是影响人类身体健康的主要疾病之一。随着肿瘤发病率和死亡率逐渐升高,对肿瘤患者的治疗也越来越迫切,目前癌症的治疗主要有化疗、放疗、手术外科治疗和靶向治疗。其中靶向治疗是治疗癌症的最有前景的手段之一。而多靶点治疗相比单靶点具有抗耐药性、可协同性等优点。本研究工作在实验室前期研究工作基础上,设计合成了新型二噁烷并喹唑啉化合物,使用HPLC、~1H NMR、13C NMR和HRMS进行纯度分析和结
学位
信息技术的不断发展,使得国际贸易理论的本质与现实的国际分工形式均发生了重大变革,要素和信息的非自由流动、产品差异化成为当前国际贸易理论体系的两个显著特征。互联网的广泛运用降低了搜寻成本,提高了经济主体间的沟通效率,极大推动了国际贸易的发展。而金融危机后新贸易保护主义的高涨激化了各国间的贸易摩擦,阻碍了国际贸易市场一体化进程。对于中国来说,传统的关税和非关税壁垒对于国内产业的保护作用日益削弱,出口企
学位
超结构因其独特的微观结构设计而展现出超常的物理和力学特性,其中负泊松比力学超结构因其特殊的变形模式和优异的力学性能,而受到广泛地关注。智能材料是一种能感知并响应外部刺激的新型功能材料,拥有很多普通材料不具备的特殊功能。将超结构与智能材料结合,可以制备出具有自感知和自驱动功能的智能超结构,实现结构和功能的一体化。本文主要在常规负泊松比超结构的基础上,结合形状记忆聚合物(SMP)和水凝胶这类智能软材料
学位