监控视频中的行人再识别算法及其对抗防御研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:panshuangchun
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着视频监控网络的广泛部署,行人再识别技术作为智能视频监控系统中的关键一环,已成为计算机视觉和多媒体分析等领域的热门研究方向。行人再识别技术的目标是判断不同监控摄像头下捕获到的不同行人图像是否具有相同的身份,该技术能在海量的跨摄像头视频监控数据中对目标行人进行快速有效地查找。近几年,研究人员对该问题进行了广泛的探索,并提出了一些行之有效的解决方案,但是这些方法仍然存在着一些缺陷,例如(1)算法依赖大量的标注数据。目前大多数的行人再识别算法都是基于强监督学习,这意味着模型在训练过程中需要大量的人工标注的行人图像数据,然而在实际的视频监控网络中,由于监控场景复杂,自动行人检测、追踪算法得到的行人图像、轨迹将引入大量的噪声样本,并且精确的跨相机行人图像身份标注需要耗费大量的人力物力,导致模型学习过程中无法充分地利用监控视频数据,这在很大程度上限制了行人再识别技术的推广与应用;(2)行人再识别模型在受到攻击者的恶意攻击后表现十分不可靠。尽管基于深度神经网络的行人再识别算法在公共数据集上取得了良好的识别表现,但是研究发现,当这些模型在受到恶意攻击时,识别表现将大大下降,甚至不再有效,这使得算法在实际应用中存在很大的安全隐患。现存的行人再识别算法中存在的这些缺陷使得监控视频中的行人再识别仍然是一个十分具有挑战性的任务。本文从这些实际的问题出发,对行人再识别任务进行了系统深入的研究,并提出了两种基于有限标注数据的(弱/无监督)行人再识别算法,提出的方法在保障识别表现的同时有效地减少了模型对行人图像的标注需求。此外,本文提出了一种有效的对抗攻击检测方法,可以成功地将对抗样本与良性样本区分开来,以提升行人再识别模型在恶意攻击下的安全性,实现模型的对抗防御。本文主要研究内容和创新如下:1.基于多示例感知学习的弱监督行人再识别为了降低监控视频中不可靠的行人检测或追踪结果对于模型训练所造成的影响,并实现监控视频中的粗粒度行人再识别任务,即判断目标行人是否出现在了一段视频中,本文提出了一种基于多示例感知学习的弱监督行人再识别方法。该方法首先将监控视频中行人再识别任务转化为多示例学习问题,并在此基础上提出一种公共行人身份感知机制来挖掘行人监控视频之间的相似性关系。最终,利用视频标签作为监督信号(弱监督),通过联合优化多示例学习损失函数与公共行人身份感知损失函数从监控视频中学习行人再识别模型。本文所提出的弱监督行人再识别方法在保证了识别表现的基础上,不仅在很大程度上减少了监控视频标注的代价,并且对于噪声样本具有较强的鲁棒性。2.基于跨相机匹配一致性的无监督行人再识别为了进一步解决行人再识别模型训练过程中对于标注样本需求的问题,本文提出了一种基于跨相机匹配一致性的无监督行人再识别方法。提出的方法使用最近邻算法来探索每个监控相机内捕获到的行人图像之间的身份关系,并在此基础上引入全局网络一致性约束条件来挖掘相机之间匹配的行人图像对,进而使用获得的行人图像对来学习跨相机距离度量模型,最后通过交替地进行跨相机匹配行人图像挖掘与距离度量模型优化,学习到可靠的跨相机距离度量模型实现行人再识别。本文提出的无监督行人再识别方法取消了模型训练过程中对行人身份标注数据的需求,并取得了较为可靠的识别表现。3.基于多专家对抗攻击检测的行人再识别模型防御本文通过实证研究发现:(1)比起良性查询样本(正常的行人图像),对抗查询样本(被攻击过的行人图像)与其在行人再识别模型下检索到的前K个近邻样本之间有着更低的相似性;(2)比起良性查询样本,对抗查询样本在行人再识别模型下检索到的前K个近邻样本之间有着更低的相似性;(3)良性查询样本在经过多个不同的行人再识别模型后检索到的前K个近邻样本之间具有更高的重复性,而对抗查询样本在不同行人再识别模型下检索到的结果十分混乱。基于以上的发现,本文提出了一种基于上下文不一致性的多专家对抗攻击检测算法,使用多个具有不同网络结构的行人再识别模型作为多专家模型,通过检查上下文不一致性信息来推断查询样本是良性样本还是对抗样本。本文提出的多专家对抗攻击检测算法能够有效地检测出多种不同的对抗攻击对行人再识别模型的干扰,有助于提升行人再识别模型在实际应用中的安全性,实现行人再识别模型的对抗防御。
其他文献
伴随着我国司法体制的进一步深化改革,我国刑事诉讼法在认罪认罚制度内容上做出了许多修订,其中检察机关对于认罪认罚制度中的量刑建议权的行使,引起了理论界及实务界的激烈讨论,对于该项权力提出的内容,已然慢慢演变为由过去的提出幅度量刑转向了提出相对精准的量刑建议,这一转变引发学者的深度思考及实务工作者的高度重视。认罪认罚制度的价值目标之一是提高诉讼效率,精准化量刑建议逐渐成为量刑建议的一种趋势,其恰好是对
学位
随着互联网和零售连锁企业的深度融合,连锁企业获得快速发展,推动了企业人力资源管理的不断创新,同时也对零售连锁企业的人力资源管理提出更高要求。本文在分析零售连锁企业人力资源环境的基础上,针对目前零售连锁企业人力资源管理中存在的问题,提出了在"互联网+"时代下零售连锁企业人力资源管理的创新和突围之路。
期刊
随着大数据、物联网和社交网络的快速发展,多种大数据平台如社交App、电子商务系统、医疗信息系统等产生大规模的多源数据。不同于传统的单源数据,多源数据类型多样、内容多元化,包含更丰富、全面的用户信息,在实际生活中普遍存在。尽管多源大数据通过挖掘和分析,得到了广泛应用,但同时也引起人们对多源数据隐私泄露问题的关注。目前,加密数据成为保护数据隐私的主要手段之一,但该方法限制了数据的可用性。差分隐私作为一
学位
大力发展分布式光伏发电,是促进我国可再生能源开发利用、推进能源结构调整的重要举措。三端口隔离型DC/DC变换器(triple active bridge,TAB),每两个端口间均可实现功率的传输与变换,相较于双有源全桥直流变换器(dual active bridge,DAB)而言,控制灵活性更高,供电可靠性更好。其中,高频变压器的应用不仅可以实现端口间的完全隔离与电压匹配,还可以极大的减小装置体积
学位
受制于肿瘤的异质性以及肿瘤微环境的复杂多变,人类对多种肿瘤的发生、发展机制仍然尚未明确。细胞膜锚定丝氨酸蛋白酶Matriptase在多种肿瘤组织中过量表达,且参与体内细胞膜和细胞外基质中多种生物大分子底物(如pro-HGF、pro-u PA及PAR-2等)的蛋白水解激活,并通过增强肿瘤细胞的增殖、浸润和迁移,来促进肿瘤的发生、发展和转移。因此,Matriptase作为肿瘤细胞侵袭和转移发生的关键节
学位
近十年来,中国经济的快速增长使得地方政府发行债券的速度不断加快,规模不断扩大。地方债券的发行不但促进了地方经济的投资增长,也优化了地方资源配置,推动了地方的经济发展。2020年以来,在抗击疫情和恢复经济的双重压力下,地方债务规模扩张之势明显。据财政部数据统计显示,截止2020年11月,全国发行地方政府债券1384亿元,2020年财政预算赤字率提高至3.6%以上。地方政府发行债券对恢复经济无疑起到了
学位
对硝基苯酚(p-nitrophenol,p-NP)毒性强、不易生物降解,是化工、农业、染料等行业排放废水中常见的有机污染物。由于含有硝基基团,p-NP去除方式通常需要先还原转化为易矿化、毒性较低的还原产物,通常情况下还原降解的动力学过程也较为缓慢,因而,开发高效、快速简便的去除方法显得尤为重要。另一方面,碳材料,凭借其优良的性能被广泛应用于环境、催化等领域。传统制备碳材料的方法往往以不可再生的碳源
学位
继互联网和移动互联之后,人们已经开始向万物互联的物联网时代迈进。作为物联网关键技术之一的射频识别(Radio Frequency IDentification,RFID)技术,在信息采集和物理世界感知等方面发挥着重要作用。由于其识别距离长、读写速度快、非光学识别等优势,RFID技术已被广泛应用于库存管理、仓储管理、供应链管理、智能交通等各种与人们生活息息相关的领域;并大有可能在制造、物流、零售等领
学位
本文结合2021年北京市学业水平等级性考试物理试卷第19题阐述类比复习的意义,并以静电学中的"场"和"路"与力学相关内容类比,深化概念、规律的理解,构建知识系统,凸显科学思维,发展核心素养.
期刊
即时检测(POCT)由于操作简便、便携等特点,已在生化分析、临床诊断、环境监测、食品检验等领域应用广泛。但POCT技术仍存在挑战:包括如何准确定量复杂体系中目标物;如何避免灵敏度不足引起的假阴性信号;如何降低成本;如何使设备的更加小型化及操作简便化;如何丰富检测项目等。聚多巴胺(PDA)由于其优异的性能(易于合成及功能化、生物相容性好等)已经广泛应用于生化分析、生物医学工程、能源和催化等领域,然而
学位