多模态行人重识别算法及特征检索研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:Fishfag
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着城市不断发展,城市化水平不断提高,人们越来越关注城市安全问题。借助“天网工程”完备的视频监控体系,公安干警可以借助影像资料追溯嫌疑人和走失人员,并还原出轨迹路线。但如果仅依赖人工,需要消耗大量精力在寻找和分辨行人身份上,极大地降低效率。而行人重识别任务正是在给定查询行人图像的前提下,在视频数据库中搜索并返回若干个最可能是该行人的结果,从而快速检索匹配行人身份。但该任务面临的困难包括多拍摄场景下的行人外观姿势变换,不同模态下客观存在的模态鸿沟和特征检索时可能存在的维数灾难。本文通过对现阶段行人重识别问题几个热点方向的总结,从多模态行人特征提取和加速特征检索方法两个角度入手,主要研究工作如下:(1)单模态行人重识别特征提取网络模型研究对于单模态下的行人重识别任务,本文提出了一种基于多层次的部位切分网络(Multi-level Slice-based Network,MSN)。它的基础结构是双分支结构,分别是全局特征提取分支和局部特征提取分支,两个分支都利用了不同层级中的多层次信息,并结合所切分的不同区域。实验证明,提出的MSN在几个主流的单模态数据集上取得出色的效果,证明了网络设计和联合目标函数的有效性。(2)跨模态行人重识别特征提取网络模型研究对跨模态的行人重识别任务,本文提出一种基于通道Zero-padding的MSN。对输入做通道Zero-padding处理后,跨模态网络可以由单流输入结构MSN表征。联合损失函数的设计使网络能够克服模态鸿沟。实验证明,提出的基于通道Zero-padding的MSN在多模态数据集上取得较出色的效果,证明了网络设计和联合目标函数的有效性。(3)加速行人重识别特征检索方法对于加速特征检索,本文对应用了K-D树和乘积量化倒排索引的两类方法进行分析,基于K-D树的特征检索方法是精确检索,但是特征维数会影响检索效率,并且树结构所占空间大小并未减少甚至增加;而基于乘积量化倒排索引的方法由于量化误差的存在,在准确度上会下降,但是它在缩短检索时间上提升很大,并且量化后的编码特征所占空间大大减小。实验证明,上述两类方法能够大大缩短行人重识别特征检索时间。
其他文献
随着检测技术的发展,X射线无损检测现在已经成为了一项重要的检测技术,它具有穿透性强,成像信息丰富等优势,无论是在工业器件,还是在医疗设备上都有很多的应用。然而由于检测
目的探讨Nup88基因在前列腺癌组织中的表达状况,以及对前列腺癌DU145细胞在体内外生物学行为的影响,进而判断该基因能否作为靶向诊治前列腺癌的潜在靶点,为治疗去势抵抗性前列腺癌提供新的方向。方法实验分三个阶段进行,首先判断Nup88基因在前列腺癌中的表达及其相关性。采用qRT-PCR和Western blot检测前列腺癌DU145细胞和前列腺正常上皮RWPE-1细胞中Nup88基因的表达水平,同
保护好计算机网络信息系统,构建可靠的信息安全防护体系,已成为信息社会的重要课题。近年来,将机器学习的方法应用到入侵检测技术研究中受到越来越多的关注。基于机器学习的
随着技术和硬件的进步,数据收集变得更加容易,数据库规模越来越大,复杂性越来越高,人类面临的一大问题就是如何在复杂的高维数据中得到有用的信息。众所众知,人眼能识别的可
由于互联网的迅猛发展,自然语言的处理(NLP)成了从互联网上获取知识的重要手段。随着互联网的普及,出现了很多“手机族”“拇指族”,在线社交媒体平台成为人们生活变得密不可
储能系统作为微电网实现稳态运行和能量管理的核心与载体,具有削峰填谷、调压调频、应急备用等功能。锂离子电池具有能量密度大、功率密度大、充放电效率高、响应速度快等优
随着互联网和信息技术的快速发展,移动智能化时代的到来,实际生活中,人们的出行离不开定位与导航,汽车驾驶、出行路线规划等这些场景都与定位技术息息相关,当然这些都是室外
电液位置伺服系统是航空航天、军舰、石油开采、桥梁建设等大惯量重载荷工业驱动机构的核心系统,高性能电液位置伺服控制系统具有良好的低速稳定性、高频响应、高精度的特点,
无线传感网是集数据采集、数据传输、数据处理于一体的智能控制系统,有着巨大的应用范围和实用价值。IEEE1451标准提供了无线传感器的接口标准,此标准使得传感器配置简单、通
随着司法改革的深入推进,上海市基层检察院检察官员额比例确定为34%。然而,同一员额比例是否适用于办案业务量不尽相同的各基层院,似乎仍然有值得商榷之处。本文以上海市M区