基于深度特征的相关滤波跟踪研究

来源 :中南民族大学 | 被引量 : 0次 | 上传用户:vpnyoyo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉目标跟踪作为计算机视觉领域的重要研究方向,在视频监控、人机交互,智能交通、军事目标定位等方面有着广泛的应用。经过60余年的发展,视觉目标跟踪技术取得了很大进展,但受目标形变、遮挡、环境光照变化等诸多因素的影响,尚没有一种通用的跟踪算法可以解决上述所有问题。因此,设计鲁棒性强、跟踪精度高、实时性好的目标跟踪算法是一个颇具挑战性的工作。近年来,基于相关滤波理论的跟踪方法在视觉目标跟踪数据集上取得了优越的性能。这一类方法在初始化阶段训练一个判别性相关滤波器(Discriminative Correlation Filter,DCF),随后的步骤由检测和更新交替进行;1)检测:在前一帧目标位置处获取当前目标外观与滤波器做相关运算得到相关响应图,根据响应峰值确定当前帧目标位置;2)更新:利用新的当前帧目标位置提取目标外观、再根据期望输出对相关滤波器进行更新。由于上述操作均可在频域中通过快速傅里叶算法实现,基于相关滤波的跟踪方法在实时性上具有非常显著的优势。围绕这一框架,后续研究主要集中在外观模型改进、训练与更新策略、应对目标尺度变化等方面。随着深度学习的兴起,卷积神经网络(Convolutional Neural Networks,CNNs)在图像特征表达上显示了巨大的优越性。本文将基于相关滤波的跟踪方法与深度神经网络相结合,针对目标外观表达和尺度自适应策略开展研究,主要内容如下:(1)在将相关滤波器从单通道特征扩展到多通道基础上,针对不同的目标外观表达,即原始灰度特征、HOG特征、卷积神经网络不同卷积层输出的深度特征,分别训练相关滤波器进行跟踪;其中深度特征的提取利用了VGG网络的迁移学习特性,直接采用MatConvNet库中针对图像分类任务的VGG网络模型imagenet-vgg-2048-network,分别提取该网络的每一个卷积层输出作为特征;将上述特征应用到跟踪器、在OTB-2013数据库上进行了测试。实验结果表明深度特征相对于传统的手工特征具有显著优势,特别是深度特征第1层和第5层提升效果最明显。以此为依据,本文提出用第1层和第5层特征分别训练相关滤波器、将两者的跟踪响应加权后作为最终的跟踪结果;实验结果表明该方法对跟踪的精度和鲁棒性有进一步的改进。(2)研究了一种基于深度特征的连续域相关滤波方法(Continuous Convolution Operator Tracker,C-COT)并进行了改进。针对传统判别式相关滤波方法只使用单一分辨率特征而导致跟踪性能受限的问题,C-COT通过隐式插值将每个卷积层特征图转化为连续函数,在连续域中定义和学习相关滤波器,每一层相关响应图进行加权求和得到最终的置信图;以此实现不同分辨率的特征图自然融合。在C-COT算法基础上,本文针对目标尺度变化引入了尺度自适应机制,通过对目标候选区域进行多尺度采样,提取其HOG特征构建尺度滤波器对目标尺度精确估计。实验结果表明,综合考虑不同跟踪条件下的成功率和精度,本文方法对目标尺度变化问题有较好的解决,对跟踪性能的改善具有较显著的效果。
其他文献
随着化石能源开发力度的逐年加大,传统能源逐步枯竭,温室气体排放导致气候变暖,对各国的能源安全和全球应对气候变化提出新的挑战,中国能源分布“富煤、缺油、少气”特点,如
光华乡罗池村是一个典型的移民区,这里有来自河南、山东、陕西、安徽等地的移民。这些移民在迁徙到这里以后把他们的源方言也一并带了进来,在长期与当地居民及其他移民接触的
晚唐五代被看作是古代汉语和近代汉语的分界点,这一时期在汉语史的研究上有重要地位。在古汉语介词的研究中,先秦两汉的文言古籍、唐宋的禅宗语录、元曲、明清小说,前人做了
能源安全、经济发展与环境保护已经成为全球范围内紧密联系在一起的政策主题。随着人类社会的快速发展和矿物能源的大量消耗,开发生物质能源已成为当前全世界解决能源与环境
水声传感器网络UASNs(Underwater Acoustic Sensor Networks)在工业、国防、环境等领域广泛的运用,一直以来为国内外研究机构和研究学者所高度重视的物联网技术。UASNs主要由
语料库的建设与发展对提高汉语国际教育的教学效率与教学质量有着不可忽视的作用,现有的汉语国际教育语料库有北京语言大学HSK动态作文语料库和汉语学习者口语语料库(未开放
国际投资,作为一个国家重要的经济支撑,不仅能弥补东道国技术、资金、管理等方面的不足,而且将有效的促进一国经济发展,是国家崛起的一个有效方式。然而,随着国际投资不断发
近些年,随着科技的日益进步和人类对于未知领域的不断探索,有越来越多的不适合人类直接到达的环境需要研究和探索。网络化遥操作技术作为能最大限度发挥人类和机械系统各自优
随着4G移动通信技术的成熟稳步发展,智能手机应用已越来越广泛,远程成人教育信息管理系统涉及控制技术、通信技术、计算机技术。采用移动设备通信和数据处理功能,随时随地使
青年亚文化用以指涉青年人特有的,有别于主流文化的边缘性和从属性文化实践形式。改革开放后,随着中西方文化交流的深入,诸如嘻哈、摇滚、朋克等典型的青年亚文化现象在我国