基于帧内变化的视频行人再识别方法研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:wcfsoa2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为了更好地保障公共安全,监控设备越来越多地普及在校园,办公室,火车站和机场等公共场所。行人再识别任务(Person re-identification)就源于多视频监控,它用以判断不重叠的视角中拍摄到的行人是否为同一个目标。近年来,由于人员安全和监控在公共和私人场所的重要性,行人再识别技术已经变成计算机视觉领域中的一个热点问题。本文主要研究基于给定视频的行人再识别算法,以便有效地提取和处理视频序列中行人的信息。为解决多相机视频监控带来的诸如照明变化,视点变化,尺度变化和方向变化等问题,我们使用卷积神经网络(CNN)和循环神经网络(RNN)来共同提取行人的外貌信息和运动信息,从而得到鲁棒的行人特征表示,成功地将外貌信息和运动信息结合到一起。同时,为了衡量两个行人的相似程度,我们利用孪生网络(Siamese Network)同时得到两个行人的特征表示,并通过孪生损失函数(Siamese Loss)评价两个行人的相似程度。其中,孪生损失函数主要用来解决视频间的特征变化(视频间变化)。在此基础上,我们提出行人平均状态的概念,并定义了一个视频帧内损失函数,以缓解同一视频内的时空特征的变化(视频帧内变化)。具体地,行人平均状态捕捉到整个视频序列中行人的变化,并使用该信息以整体的方式来表达一段视频,然后用于和其他行人的视频进行比较。在训练我们提出的网络的过程中,行人平均状态会跟随网络的更新而更新,以得到一个更有效地行人平均状态。视频帧内损失函数通过最小化每个帧与行人平均状态之间的距离来缩小视频帧内变化。我们将行人平均状态,视频帧内损失函数与孪生网络相结合,形成一个新的网络结构,使得网络可以同时减小视频间变化和视频帧内变化,从而提高网络的泛化性和准确率。所提出的方法有如下几个优点:1)我们引入行人平均状态的概念,以整体的方式表达一个视频,从而提取出一个视频内行人的空间信息和时间信息。2)我们定义了一个视频帧内损失函数,尽可能的使一个视频内行人的时空特征变得更加紧凑,从而降低行人匹配时的难度。3)我们将视频帧内损失函数和孪生损失函数结合起来,对网络进行训练,从而提高网络提取特征的有效性。
其他文献
近年来,随着物联网和移动互联网的高速发展,第4代(4G)移动通信逐步向第5代(5G)演进。传统的正交多址接入方式已经难以满足未来移动通信中海量用户数据传输的需求,因此对频谱资源具有高利用率的非正交多址在5G标准化中引起了广泛的关注。在非正交多址中,来自不同用户的数据流按照一定的规则被叠加传输,这使得多用户传输系统具有更高的频谱效率和更强的接入能力。本文研究了基于空间耦合结构的非正交多址技术,在多用
【目的】探究Toll样受体4和TGF-β1在肝纤维化大鼠肝脏组织的表达以及C型钠尿肽对Toll样受体4和TGF-β1表达的影响。【方法】60只SD大鼠,随机选取其中20只SD大鼠作为对照组,
皮肤是机体免于脱水、损伤和感染的第一道防线,是维持内环境稳定和阻止微生物、化学物质等侵入的屏障[1]。皮肤组织的创伤修复及组织再生是整形烧伤及创伤外科中常见的问题及
在以学生为主体、教师为主导的教学理念下,结合启发式教学,课堂教学中的教师提问显得尤其重要。有效的教师提问是促进学生思维、评价教学效果以及推动学生实现预期学习目标的
信息结构指说话者传递信息,听话者感受信息,并且说话者对听话者的认知状态进行评估而调整信息分布的结构。焦点是信息结构的核心概念,是说话者认为所要传达的信息要点,也是听
社区结构是社交网络的重要特征,它是指网络中同一社区内部的节点连接紧密,不同社区间的节点连接疏松。社交网络的社区结构具有层次性,即:大的社区内嵌套着若干小社区。挖掘社交网络中的层次化结构,对于理解社交网络的组织结构和系统功能具有非常重要的意义。层次社区划分方法可以分为凝聚式和分裂式,其中凝聚式凭其优良特性取得了较为广泛的应用。现有的凝聚式社区发现算法往往存在以下问题:(1)将网络中的每个节点当作初始
西藏松多地区板多铅锌矿床是冈底斯中部新发现的赋存于晚三叠世花岗闪长岩体中的中型矿床,其研究对冈底斯成矿带成矿作用期次的厘定和区域成矿理论研究具有十分重要的意义,但
类别不平衡问题是机器学习和数据挖掘等领域中主要关注的问题之一。特别是近些年来,随着互联网的日渐普及和大数据时代的到来,使类别不平衡问题成为了一个炙手可热的课题。通
一场针对巴基斯坦联邦政府且具有分离主义倾向的武装起义正席卷俾路支省。这场分离主义运动对喀布尔、德黑兰、德里、中亚地区和华盛顿都有着相当的战略影响,尤以经济影响为
随着科学技术的发展和时代的进步,人们对器件尺寸的要求不断小型化,半导体器件面临着巨大的压力和技术上挑战。虽然闪存(flash)等传统的存储器可以满足非挥发性,但其响应速度慢、可重复擦除次数有限等缺点不利于数据的处理。为了突破传统存储器在尺寸方面的限制,对于提出和开发革命性、高效性、全新的非挥发性存储技术提出了全新的要求。因此,半导体行业一直在努力寻求可以同时满足高速、高密度、低功耗和存储容量大等优