联合检测和重识别的行人搜索研究及嵌入式实现

来源 :浙江大学 | 被引量 : 0次 | 上传用户:xgimi1985
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
行人检测和行人重识别是计算机视觉领域极具挑战性的研究课题,是智能监控系统和智慧城市构建中的重要环节,以其重要的理论意义和使用价值受到学术界和工程界的广泛关注和研究。其中,行人检测难以同时满足速度和精度上的要求,高效的检测器容易遗漏目标,高精度的检测器达不到实时运算。而行人重识别在研究和应用之间还有较大的距离,识别准确度也有提升的空间。本文主要围绕提高检测速度和重识别精度两项问题开展理论研究和广泛的实验验证,并将算法封装在软件中,通过在Jetson TX2的嵌入式部署构建出高性能智能监控摄像设备,打破了研究和工程的屏障。本文的主要创新工作如下:1.基于深度可分卷积并利用通道混洗、通道拆分以及恒等映射技术提出了三个轻量卷积单元。相比于普通卷积,本文提出的轻量单元在减少近7倍参数量和计算量的同时保持了模型的性能,通过在ImageNet上的分类任务训练和评估验证了提出的轻量单元比其他轻量单元有性能上的优势。2.对于轻量的行人检测网络的搭建,沿用YOLOv3的思想,利用提出的三种轻量卷积单元搭建主干网络,后续网络广泛使用分组卷积,使模型相对于YOLOv3在参数量上减少为原来的15%,速度提升约1.7倍,实现单纯的网络计算达到200FPS。基于平均距离和轮廓系数确定锚框聚类的中心数,用人脸和人体锚框分类聚类和组合的方式选择锚框尺寸,减小了1%的坐标预测误差。提出间隔交叉熵损失用于指导置信度训练,相比使用传统交叉熵训练提高了 4.6%mAP。模型在三个公开数据集上训练和评估,验证了提出的方法极高的实时性和具有竞争力的准确度。3.对于行人重识别网络,设计了局部特征和全局特征并行提取的结构,引入ArcFace进行分类学习,联合行人检测模型提升输入图片质量,减少无用的背景信息,避免了人体部件对齐的过程,使原始视频帧直接作为重识别网络的输入成为可能。提出可见度评分子网,用于联合局部特征向量进行加权距离计算以解决人像不完整或有高度遮挡的识别问题。模型在两个公开数据集上评估,其中在Market-1501数据集上取得目前最高的86.0%mAP和接近最好的94.1%rank-1准确率。4.将研究的成果封装成易于使用的应用程序,用PyQt编写了能够跨平台运行、兼容性高、界面设计精美的软件平台,以Jetson TX2为载体构建智能监控摄像头,摆脱了传统上对视频服务器的依赖,实现高性能高质量的边缘计算。
其他文献
随着信息技术的不断发展,21世纪已经进入高速发展的数字时代,近年来计算思维教育成为教育者热议的一个话题,计算思维已经成为当代公民更好立足于社会的重要技能之一。2017年我国将计算思维纳入到普通高中信息技术课程标准中,可以看出国家对计算思维教育的重视。小学是学生形成良好学习习惯和思维方式的重要阶段,也是为今后学习、生活和工作做好铺垫的关键时期,但是我国小学阶段的计算思维培养方式较为单一,并且实施的门
随着人们生活品质的提高,对服装织物的抗皱性品质要求越来越高。传统织物折皱等级分类一般都是靠人的主观观察来得出结论,虽然经验丰富的专业人员的观察结果有很大的可靠性,
目标跟踪技术是计算机视觉领域中非常关键的一项技术,主要应用在重要的公共场所,如机场、车站、银行、地铁等,进行安防。纯目标跟踪算法跟踪精度很低,达不到真实的跟踪效果。
医学图像分割作为图像分割的较早应用领域,是医学图像分析的关键技术,也是临床应用的重点和难点。我们可以通过分割算法提取出医学图像中的感兴趣区域并单独显示,从而更直观
目的:评价欧洲白血病网(ELN)指南推荐的(慢性髓系白血病)CML管理建议对我国(慢性髓系白血病慢性期)CML-CP患者的适用性,分析我国多中心对一线伊马替尼(IM)耐药或不耐受的初诊CML-CP患者转换二线尼洛替尼治疗的临床数据,比较维持一线伊马替尼和转换二线尼洛替尼的临床疗效差异及用药安全性,评估换药原因、转换时机及预后风险评分等因素对换药后疗效的影响,以优化临床疗效监测及TKI维持或转换时机
目的1.对于乳牙列期前牙反(?)儿童,单纯腺样体病理性肥大、单纯扁桃体病理性肥大及腺样体合并扁桃体病理性肥大对其颌骨形态产生的影响。2.对于混合牙列期前牙反(?)儿童,单纯
近年来,二维材料因其优异的力学性能、电学性能,在可穿戴领域有广泛的应用。相比于传统硅晶体,石墨烯、过渡金属硫属化合物等典型二维材料具有高的载流子迁移率和更高的机械
由于卫星机载存储技术、图像带宽传输技术以及经济因素的限制,一幅遥感图像很难在提供了高空间分辨率的同时具备精确的光谱信息。随着遥感图像越来越广泛地被应用于社会生活
无线传感器网络由于其低成本,低功耗、自组织等特点,被广泛应用于环境监控、医疗保健和工业生产等领域。在有些特殊的应用场景如工业控制中,数据的传输不仅需要考虑传输的可
相对于传统虚拟化技术而言,轻量级虚拟化技术提供了一种更为轻简的虚拟机部署与管理模式。以容器为典型代表的轻量级虚拟化技术,推动了PaaS的发展、且有利于更广泛地进行云部