基于生成对抗网络的跨域行人重识别研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:lanxuexiao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视频监控成为现代社会中维护治安以及案件侦查中不可或缺的一部分,其可以准确有效的记录某段时空下的音频、视频信息。通过对监控信息的分析以筛查,可以完成特定人员查找、路线追踪等。但是,使用传统方法或者人工方式需要消耗大量的人力和时间成本。自行人重识别(Person Re-identification,本文中的Person Re ID,Re ID特指行人重识别)提出以来,该问题得到了一定的缓解。但是行人重识别数据集相对于当前阶段研究内容相比,数据集的特征空间的分布上存在较大的缺失,且其数据集存在难以制作,时间和人力成本消耗大等特点,使得行人重识别近年来其在解决难点问题上驻足不前或进展缓慢。不可否认,行人重识别进展缓慢与行人重识别现有数据集不足存在较大的关联。生成对抗网络(Generative Adversarial Networks,GAN在本文中表示生成对抗网络)虽然在行人重识别之后提出。但是其迅速的成为了计算机视觉中的又一热点,被广泛的应用于计算机视觉的多个领域,如:图像修复、图像超分辨率、图像检索、图像生成、图像编辑等。如何使用生成对抗网络对现有的行人重识别数据进行数据增强,通过数据增强方法弥补现有数据集的不足,最终实现行人重识别现存问题的解决等。本文将通过风格、姿势以及服装三个方向的数据增强方式解决现有数据集存在的不足。本文主要研究内容如下:(1)针对于光照变化、场景变化较大时模型识别率下降的问题,我们采用改进当前有关于风格转换的网络,对行人重识别数据集进行风格上的数据增强,获得几倍于原始数据集量的目标任务下的数据。本项任务改进了Cycle GAN网络,相对于原始的网络,我们生成的图像更加清晰,特征空间也更符合目标特征空间。通过数据集中不同特征空间的数据子集的互相转换,可以获得更多的训练数据。同时,该数据增强方法可以用于转换现实中某场景下的数据,用以提高模型某场景下的识别准确率等。(2)对于数据集中人体姿势较少,现实场景中人体姿势更为复杂的问题,与(1)中所述相同的操作,我们使用改进后的PATN将不同图像以及其姿势信息通过特定设计的生成对抗网络,可以获得到一个行人图像对应其他姿势的图像。通过该方法可以扩充数据集中人体姿势信息的数据,最终达到提升模型识别准确率的效果。(3)同样的,对于现实场景中行人存在服装更换的问题。我们还可以通过虚拟试穿生成一人穿着不同衣服的图像。本文提出了PRQ-VTON网络,该虚拟试穿网络可以生成出具有高质量和高真实性的虚拟试穿效果,可以使用该方法研究基于换装的行人重识别方法,该方法可以有效的辅助换装的行人重识别研究。通过对现有数据集应用不同类型的生成对抗网络,我们可以在现有的数据集上实现不同风格、不同姿势的数据增强,最终完成训练模型准确率的提升。此外,本文中的虚拟试穿技术也可以应用到之后基于换装的行人重识别的研究中。本文在Market-1501,MSMT17等数据集上相关的实验可以证明,生成的数据质量优于当前的生成模型,并且使用扩充后的数据集训练的模型在识别精度上有了明显的提升。
其他文献
千金子[Leptochloa chinensis(L.)Nees]是一年生杂草,能够在淹水和旱地条件下生长,在直播稻田的危害最为严重。千金子种子量大且休眠期长,只要条件合适就可以萌发生长。目前对千金子种子萌发的研究甚少,为了了解千金子种子和幼苗在萌发生长过程发生的生理生化变化,以及有效防控千金子。本文对世界性农田恶性杂草千金子的萌发过程进行深入研究,主要研究了千金子种子的休眠及萌发特性、千金子幼苗
预测药物和靶标之间的相互作用对于开发新药物非常重要,它可以加速药物开发的过程并且降低所需的成本。然而传统的临床试验需要消耗大量的人力、物力,既昂贵又费时。传统的机器学习方法大多采用一维字符串或者描述符表示药物化合物和蛋白质靶标,这种基于手工特征的方法不能完整提取药物分子和蛋白质靶标的特征。深度神经网络在特征提取过程中没有考虑和充分利用药物内部的结构信息。因此急需研究新的方法来预测药物和靶标之间的相
化石能源的广泛应用造成的环境污染和能源危机已成为当今世界的两大问题。开发基于电化学能量存储的新能源器件,对于缓解环境污染、解决能源危机具有重要意义。其中,电极材料的本征特性在很大程度上决定了新能源器件的性能、成本和可靠性。通过调控电极材料的组分及其“电子/相/微观”结构,有助于优化电荷转移和离子扩散过程,为高性能电极材料的设计和制备提供了重要的理论和现实意义。与二次电池相比,双电层电容器具有更高的
药物研发是一个相当耗费时间以及成本高昂的过程,在新的药物研发的过程中,为了研发出安全有效的新药物,需要进行反复测试以及大量的临床实验的化合物就高达成千上万种。药物研发一般需要经过临床前研究,临床研究,FDA药品审查过程以及上市后的安全监控等漫长的步骤及监管,其研发的时间维度可见一斑。通常,药物平均研发周期在10到15年,约8亿美金研发成本,一般来说,90%的新型药物无法通过一期临床验证,研发过程中
在量子信息系统中,量子纠缠已经成为量子信息领域的研究热点.随着科学技术与信息时代的快速发展,量子信息技术也成为有关国家信息安全方面的一项重要保障,而量子纠缠又是量子信息领域中的重要资源,因此判断以及度量量子纠缠是量子信息领域中的关键问题.与量子纠缠问题紧密相关的是复对称最佳秩一张量逼近问题,随着复张量U—特征值和复对称张量US—特征值概念的提出,复对称最佳秩一张量逼近问题等价于计算复对称张量的最大
“十四五”纲要指出国家文化大数据体系是打通文化生产和消费的关键。文化数据库作为该体系的“供给端”,可以为文化内容创作生产及相关创意设计提供数据支撑。本研究针对该目标,建设“中国风格经典文化元素与原型数据库”,通过数字化采集、梳理、提炼中国传统文化元素与原型,面向创意设计行业需求提供文化数据服务,支持“中国风格”的智能产品、文化内容设计。本文研究发现,当前文化数据在创意设计领域应用面临的首要问题是文
模板匹配算法是图像配准的一种方式。该算法根据给定的参考模板,在场景图像中寻找目标。在医学图像分析、遥感信息处理、工业制造等众多领域均有广泛的应用,已成为工业自动化发展中一项必不可少的技术。本文针对模板匹配算法进行研究,研究场景目标分别出现平移、旋转、尺度或以上三种情况叠加变化时的算法解决方案。本文首先分析了基于归一化积相关的有界偏相关的平移不变性模板匹配算法。通过实验验证了有界偏相关算法的初始化性
纤维金属层板结构(FMLS),因其优良的轻量化性能,而受到工程领域的青睐,具有广泛的应用空间。通过热成型技术对FMLS进行批量成型,成型效率高,经济性好,是进近些年FMLS领域重要的研究方向。但是FMLS结构复杂,热成型过程中材料选择,压边力,纤维角度等参数难以控制,容易产生褶皱、撕裂等缺陷,严重影响成型质量,成为FMLS热成型方法广泛应用的制约。传统拉深成形,其工艺和材料的研究,主要依赖于经验参
随着互联网技术的飞速发展,促进了工业化和信息化的深度融合,相关人员能够更加便捷地对工业控制系统进行管控与监控。但是,工业系统遭受网络攻击数量也在逐年增长。导致这一变化的外部原因是互联网的接入打破了工业网络的封闭性,内部原因是工业系统本身存在潜在威胁。异常检测是一种高效识别数据集中离群点的方法。目前,应用于传统信息网络的许多异常检测模型存在检测时间复杂度高和准确率低等问题,不适用于实时性需求高的工业
压力注浆锚杆由于承载力高、经济性好和施工简便等技术优点在施工现场受到了广泛的应用。注浆压力直接影响锚-土界面粘结强度,进而影响锚杆的承载性能。因此,研究清楚注浆压力对锚杆锚-土界面粘结特性的影响对压力注浆锚杆的设计与施工具有重要的理论和工程意义。为此,本文主要完成的工作以及获得的成果如下:(1)首先,针对湖南省衡阳市某边坡施工现场的红黏土开展了物理力学性质试验,获得了试验用土的物理力学性质指标。其