基于对比学习的行人重识别

来源 :浙江大学 | 被引量 : 0次 | 上传用户:squallleo2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
行人重识别是对同一个行人在不同相机下的图片进行检索和匹配的技术。给定一张待查询的行人图片,行人重识别需要找出图片中的行人在其他相机下所出现的图片。近年来,由于行人重识别在智能视频监控、公安刑侦和安全防范系统等领域的应用需求,学术界和工业界对于行人重识别开展了大量的研究。通过充分利用图片的标注信息,全监督的行人重识别目前已经取得很高的准确率,并且得到了实际应用。然而,全监督的行人重识别需要对庞大的行人图片数据集进行一一比对,来得出图片所代表的行人关系。当数据集规模变大时,所产生的巨大的标注量需要耗费大量的人力物力资源。为了节省标注成本,便于行人重识别模型的快速应用,研究在有限标注场景下的行人重识别具有重要的实际意义。作为一项检索和匹配任务,行人重识别的特点在于训练集和测试集的行人类别是不同的,通过在训练集上对模型进行训练,主要目的是为了学习到对于不同行人具有区分和辨识能力的特征,使得模型在未知行人的图片上也具有良好的泛化性,从而对于不同的未知行人可以很好地加以区分。在无监督和一些全监督任务中,对比学习展示出了优异的表现。通过让一个样本分别或者同时和它的正、负样本进行比较,并且尽可能地增大样本和其正样本的特征相似度,减小样本和其负样本的特征相似度,对比学习可以在无监督或者有监督的情况下,让模型充分学习到同类别样本之间的相似性,以及不同类别之间的差异性。在不同的样本对或样本集合之间进行相似度的对比学习,使得模型可以学习到输入数据的高层语义信息和关系,从而产生对于不同的类别样本具有较大差异性、对同类样本具有较高相似性的特征。对比学习的特性对于行人重识别任务来说是十分契合的,即学习具有高辨识度的特征,在未知数据上可以有良好的泛化表现,因此,本论文从对比学习的角度出发,针对相机内有监督场景和无监督场景分别提出了有效的方法,用于解决在有限标注场景下的行人重识别任务。具体来说,本文的主要工作和贡献体现在以下四个方面:·本文初步探究了对比学习在行人重识别中的应用特性。在不同的行人重识别场景下,对于参数化分类损失、三元组损失和对比学习中的非参数化分类损失进行了分析和比较,从而得出不同损失函数在不同场景下的应用特点与差异,并通过大量实验加以验证。·本文对于相机内有监督场景,提出一种基于图导出对比学习的相机内有监督行人重识别方法。该方法基于相机内有监督场景下的关联约束,提出一种行人图分割算法用于预测可靠的行人关联。基于图分割导出的行人关联结果,该方法提出一个渐进式的对比损失函数,在一个统一的框架中进行相机内和跨相机对比学习,有效提高了重识别模型的行人区分能力。·本文提出一种相机感知原型特征的无监督行人重识别方法。该方法通过考虑由相机风格差异导致的聚类簇内部差异,提出学习相机感知的原型特征,用于描述每个聚类簇内部的局部结构特性。基于相机感知的原型特征,该方法进一步提出了互补的相机内和跨相机对比损失函数,以对比学习的方式来优化样本与原型特征之间的关系,以此增强模型对于不同行人的识别能力。在多个基准公开数据集上的实验结果表明,该方法相比当前无监督重识别方法取得了更高的性能,大幅提升了无监督行人重识别的准确率。·本文提出一种原型关联增强的无监督重识别方法。该方法以相机感知原型特征的无监督行人重识别方法作为基本模型,针对模型中存在的过度聚类现象进行了方法改进和优化。为了弥补无监督聚类的不足,增强模型对于同个行人在不同相机下图片的关联,该方法提出基于相似度的逐相机困难正样本挖掘策略,用于预测有效的跨相机关联,并以此对模型进行监督。在多个重识别数据集上的实验验证了所提出方法的有效性。
其他文献
泌乳功能对哺乳动物的生存繁衍至关重要。乳汁不仅可以保证哺乳动物的新生儿存活,同时也为人类生长发育提供了营养物质。动物哺乳期间,多种疾病和亚健康状态均会影响乳腺健康。氧化应激是损害乳腺健康的常见因素,通常会抑制乳腺功能,造成泌乳量和乳品质下降。自然界中的天然活性物质具有抗氧化、抗炎等特性,得到了广泛关注。Nrf2-ARE是目前已知最重要的抗氧化相关信号通路之一,生物活性物质是否可通过Nrf2-ARE
在奶牛饲养业中,饲料成本占总成本比例最大。随着玉米和豆粕等原料价格的不断上涨,饲料成本越来越成为制约中国奶业发展的重要因素。同时,环境保护标准的提高,也导致规模化牧场节能减排的压力越来越大。改善奶牛的饲料效率不仅可以降低养殖成本,保护生态环境,宏观上还可以缓解饲料用粮的供需矛盾,因此,提升奶牛饲料利用效率对奶牛养殖业的发展具有重要的战略意义。围绕奶牛饲料效率已有众多研究,主要是通过日粮配方、使用添
寄生性线虫能在动物群体中造成相当高的发病率和死亡率,其中,捻转血矛线虫(Haemonchus contortus)是世界范围内具有重大经济意义的小型反刍动物寄生性线虫之一,无论是在发展中国家还是发达国家其流行率均居高不下。该虫感染后引起的捻转血矛线虫病(haemonchosis)能够造成宿主生长发育障碍、生产力低下,严重时亦可导致死亡,极大地威胁了反刍动物的健康,另外,高昂的防治费用也制约了畜牧业
在物联网(Internetof Things,IoT)迅猛发展和5G通信加速布局之际,智慧工业、智慧物流、智慧医疗、城市大脑、消费电子等领域迎来重要发展机遇。为了搭建物理世界与云端服务器之间的连接桥梁,无线传感技术的重要性不言而喻。正因如此,无线传感器的市场需求正在加速增长。特别地,在可穿戴电子和工业监控等领域,无线无源传感器更受青睐。声表面波(SAW)传感器是代表性的无线无源传感技术之一,它具有
病毒性传染病严重威胁着公共卫生及人类与动物的健康。传统的抗病毒策略主要依赖于疫苗,例如灭活和减毒疫苗,但由于完整病毒的使用导致其生产和使用过程中存在较高的生物安全风险。此外,病毒结构蛋白免疫原性差和毒株序列高变异等原因导致某些疫苗的保护效果较差。病毒通过吸附、胞吞、脱壳、复制、装配与出芽过程完成其生命周期,而阻断病毒入侵宿主细胞被认为是最彻底有效的抗病毒策略。自20世纪70年代以来,基于病毒蛋白的
基金会在我国社会治理过程中的作用不断凸显,扮演着调节贫富差距、促进社会和谐发展与良性运转的关键角色。然而基金会的发展也面临着资源空间不充足、资源结构不合理、运作能力不完善的窘境。为此越来越多的基金会通过与政府组织和商业组织建立联系,从而构建自身的竞争优势(如壹基金)。本文以此现象为切入点,探究在转型社会背景下,中国基金会的政治联系与商业联系如何影响组织绩效?进一步地,研究主要探讨了以下三个研究问题
精准营养的目标是实现个性化的营养干预,改善动物的生产效率和福利,而了解个体间的营养代谢异质性及其机制是实现精准营养的前提。蛋氨酸是泌乳奶牛的第一限制性氨基酸,补充过瘤胃蛋氨酸(RPM)可改善奶牛生产性能,但其效果差异较大。造成效果差异的原因,大多研究在群体层面上进行简单分析,而未见从个体层面去关注这种差异并进行成因探究。因此,本研究首先通过剂量效应试验探究RPM对奶牛生产性能和瘤胃发酵的影响,确定
磁共振成像(MRI)是一种应用极广的医学成像方法,它可以对人体组织的结构和功能信息进行可重复的,非侵入式的定量测量,这些测量对于疾病的诊断和治疗都有十分重要的意义。然而MRI采样速度慢,采样噪声干扰导致重建质量偏低,一直是困扰MRI的几个关键问题。其中,作为MRI的特殊应用——胸腹部动态对比增强磁共振成像(DCE-MRI),往往又面临着呼吸运动干扰等问题。因此,本文从加入运动补偿和改进低秩性约束两
经济学分析不能不处理时间因素对经济决策的影响这一重大问题。然而,自经济学诞生以来,在这一问题上的进展就十分缓慢。现代主流经济学以自然时间或逻辑时间来定义“经济时间”,使用高度抽象的、形式化的、无差异度量方法,并据此建构越来越精致的分析模型。然而,经济学的解释和预测能力并未相应提高。现代主流经济学的内容主要是由马歇尔和凯恩斯两位英国剑桥经济学家的经济理论构成的。因此,本文从思想史角度对此问题进行考察
半导体技术是电子信息产业发展的核心。现代电子产品逐步向更高集成度、更高速率、更小型化和智能化的方向发展,驱动其相关的封装集成也向更先进的技术方向迈进。相应的高数据传输速率、高器件密集度和高工作频率而导致的电磁干扰(EMI)问题将成为限制高速封装发展的一个瓶颈。若在封装设计阶段能审慎考虑EMI问题,将有效缓解后续整机EMI的设计压力。发展瓶颈主要有以下三点,第一,传统的数值与全波仿真方法在求解越来越