基于手工设计特征与深度特征融合的目标跟踪算法研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:rkn7621278
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,在目标跟踪领域,基于图像表面纹理以及颜色通道信息处理得到的手工设计特征的粒子滤波算法以及基于大量样本训练得到的深度特征的深度学习算法是两大主流算法研究方向,各自都发展出许多优秀的跟踪算法。手工设计特征具有对纹理和颜色敏感、定位精度高、运算速度快的优点,但不适应过度形变与遮挡,即鲁棒性不足。深度特征具有高维度语义信息,对形变与旋转有不变性,对目标的形状尺度有更准确的判别,但不适应高精度的运动。此外,大多数主流目标跟踪算法的都趋向更快更准确的获得较少背景干扰下运动目标的位置与尺度描述,而在长时间遮挡或消失后重现的目标重寻方面处理策略较为简单,不适应长期目标跟踪的任务。基于以上背景,本文对视觉目标跟踪的基本概念以及主流跟踪方法进行深入分析,研究了核化滤波器KCF(Kernel Correlation Filter)的原理与尺度空间判别滤波器DSST(Discriminative Scale Space Tracking)的原理、基于空间置信蒙版与PCA-HOG(Principal Component Analysis of Histogram of Oriented Gradient)特征的滤波器在短期跟踪的应用、基于手工设计特征与深度特征的响应融合方法以及基于最佳样本组匹配的目标重寻策略,应用于长期跟踪。具体研究如下:1)视觉目标跟踪算法的基本概念与分析。列举了视觉目标跟踪技术的难点,主要包括光照条件、相机运动、目标形变、背景遮挡、背景干扰以及尺度变化等。此外,简述当前国内外视觉跟踪技术的研究现状。2)介绍经典视觉目标跟踪算法的基本工作原理。对KCF和DSST两种经典的目标跟踪算法进行详细讲解,为解决KCF中循环矩阵操作造成的边界效应和样本训练失真的问题,以及图像HOG特征计算量交大的问题,改进基于CSR-DCF(Discriminative Correlation Filter Tracker with Channel and Spatial Reliability)跟踪算法,本文引入经过PCA降维后的PCA-HOG特征以及颜色通道特征来充分描述目标图像的纹理信息,并引入空间置信蒙版,来提高目标区域识别的概率以及弱化对目标形状的依赖。尺度相关滤波器也利用PCA-HOG特征,实现可以根据目标变化而缩放的尺度描述。本文使用此方法应用于短期目标跟踪。3)手工设计特征与深度特征的响应融合算法。手工设计特征处理中使用因式分解卷子算子简化样本模型计算。使用高斯混合模型应用于正样本的管理策略,提高不跟踪时段目标与背景的区分能力。深度特征处理中使用了样本数据增强与增量学习的算法,使得样本模型能够训练出较好的泛化能力。深度网络结构采用孪生网络以及候选区域生成网络的结合,提升了网络并行计算的能力。对于融合算法的策略,考虑以上一帧目标位置与尺度描述作为基准,令两类跟踪算法独立运行,并将两者在目标搜索区域得到的特征响应矩阵经线性规划方案,得到最优的响应融合权重分配,最终获取最优目标响应。对于目标重寻策略,考虑在目标响应值低于指定阈值后启用,并根据最佳样本组,进行目标误判的纠正,从而实现对遮挡或消失后重现的目标捕获。本文使用此方法应用于长期目标跟踪。4)短期跟踪与长期跟踪算法的实验比对。基于空间置信蒙版与PCA-HOG特征的目标跟踪算法作为短期跟踪算法,使用VOT2018短期跟踪的数据集进行算法性能比对;基于手工设计与深度特征融合的目标跟踪算法,使用VOT2018长期跟踪的数据集进行算法性能比对。实验分析工具均使用VOT-Toolkit,对短期跟踪算法的准确性、鲁棒性以及EAO综合评分进行算法性能评估,以及对长期跟踪算法的查准率和查全率进行算法性能评估。
其他文献
近年来,尽管张抗抗的创作兴趣逐渐转移到散文、杂文方面,但她的小说仍占据她文学版图的重要位置。空间叙事理论自被传入国内已如细苗遇春雨般快速被各相关研究领域注意,在文
萝卜硫素(Sulforaphane,SFN)又称莱菔子素,是一种含硫有机化合物,是目前防癌抗癌效果最好的植物天然产物之一,它能诱导机体产生II型解毒酶,使癌细胞程序性凋亡并起到防癌功能
针对生物反硝化脱硫技术在处理实际工业废水时面临的回收生物硫困难,运行策略不清等技术瓶颈,本实验以厌氧颗粒污泥作为接种物,研究了不同S/N(摩尔)比条件下,生物反硝化硫资源
多溴联苯醚是一类典型的溴代阻燃剂,因价格低廉、性能优越,在全球范围内被广泛使用。其中,十溴联苯醚(BDE-209)作为含溴原子数最多的一种化合物,具有环境持久性、生物蓄积性
Metasploit是目前最流行的渗透测试框架,Metasploit的出现使漏洞利用代码的开发、测试、使用变得更加方便。Metasploit框架自带大量的漏洞利用脚本,并且支持新脚本的快速开发
随着经济的快速增长和现代化建设的不断推进,电能因清洁方便、实用高效的特点,成为生产生活中最为广泛应用的能源之一。然而,近年来电力系统规模日益扩大,电力电子技术的大量使用与迅速发展,使得电能质量问题日趋严重。其中,电压跌落已成为最普遍的电能质量问题。另一方面,在高端制造业中敏感负荷的大量应用使得电力用户对电能质量的要求越来越高,尤其对电网电压跌落问题要求更高。动态电压恢复器(DVR)串联在系统与敏感
网络流量异常检测作为一种有效的主动安全防范手段,能够为已知和未知网络攻击行为的探知提供前提支撑,是信息安全领域的重要研究课题之一。随着网络的广泛使用,网络数据信息
在混凝土兴盛发达的使用前景下,人们对混凝土应用机理的研究一直在不断探索,能初步满足于基本的工程发展需要。因此,在根据统计损伤实践的前提下,本文建立混凝土以宏观现象揭
船舶辅锅炉是船舶的重要组成部分,作为保证船舶正常运行的重要设备之一,其主要用于产生饱和水蒸气。船舶辅锅炉的安全、稳定、高效的运行对船舶安全,经济收益具有重要意义。
本文针对带有分片光滑初值的一维线性双曲方程,给出了基于偏迎风数值通量的显式龙格-库塔间断有限元方法的误差估计。间断有限元空间由k≥1次分段多项式构成,时间方向上采用标准时空CFL条件下的三阶显式全变差Runge-Kutta方法。本文证明了在终止时刻T,误差的L2(RRT)范数在空间和时间方向上都是最优的,其中RT为由初值不连续性造成的污染区域,大小最多为O((?)log(1/h)),其中h为最大单