基于相关滤波的多线索融合视觉跟踪算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:yuerenqiu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉目标跟踪作为人工智能中计算机视觉研究方向的一个热点及难点,被广泛地应用在军事国防、交通运输、医疗诊断和民用安全等各个不同的领域。其目的是仅在标定目标初始状态情况下,预测后续视频图像中目标的位置和尺度信息。现实跟踪场景中存在的遮挡、快速运动、剧烈形变、旋转和背景杂乱等挑战因素会导致目标外观改变,并且由于训练样本匮乏,致使设计一种高精确率、强鲁棒性的视觉目标跟踪算法仍然是一个极具挑战的开放性课题。2013年以来,基于信号处理理论中相关概念提出的相关滤波跟踪算法成功的吸引了国内外科研工作者的注意。该方法运用傅里叶变换将时域复杂的卷积运算转换为频域简单的点乘运算,既保证了较高的跟踪精确度又保持了极快的跟踪速度,成为近些年来视觉跟踪领域热门的研究方向。尽管相关滤波跟踪算法在各种数据集中取得了不错的跟踪成绩,相比传统跟踪算法有显著的性能改进,但在复杂跟踪场景中,由于其外观模型表达准确度下降,抗干扰能力减弱,致使跟踪表现不佳。为此,本文将多线索融合策略引入相关滤波跟踪框架,分别从特征级多线索融合和决策级多线索融合视角展开深入研究,利用与相关滤波模型互补的多种跟踪线索(包括:卷积神经网络(Convolutional Neural Network,CNN)特征、颜色直方图和多尺度滤波模板)来增强外观模型的准确性和抗干扰性,提升算法辨别目标和背景的能力。本文主要的研究工作和创新如下:(1)从特征级多线索融合思路出发,将相关滤波与CNN特征相结合,提出了一种基于相关滤波的自适应加权CNN特征融合目标跟踪算法。由于手工特征(如:HOG和CN颜色特征)的表达能力不足以捕获目标外观的本质不变性信息,限制了传统相关滤波跟踪算法的性能表现。利用深度卷积CNN特征丰富的细节和语义表达能力,分别构造出基于底层、中层和高层CNN特征的相关滤波器。以CNN特征的跟踪能力及跟踪运动一致性两方面为约束,对相关响应图进行自适应加权融合,提高算法的精确率和鲁棒性。并且针对传统相关滤波算法无目标尺度估计的缺陷,添加一个独立的一维尺度相关滤波器来完成目标的尺度估计。在50个具有挑战性视频序列上进行实验,相比于KCF算法,距离精确率提升了19.4%,重叠成功率提升了21.0%。(2)从特征级多线索融合思路出发,将相关滤波与颜色直方图特征相结合,提出了一种基于相关滤波和颜色直方图的局部结构响应融合目标跟踪算法。当部分遮挡或剧烈形变时,整体跟踪由于只描述目标的全局信息,无法进行有效的跟踪,而分块跟踪聚焦于目标的局部信息,未遮挡部分仍可以提供可靠的跟踪线索。并且单一目标外观模型和简单的线性结合局部分块响应在面对多种复杂挑战场景时有其局限性。为此,先分别提出基于相关滤波和基于颜色直方图的局部成分跟踪算法,以每个分块的跟踪损失为依据,分别自适应融合两种成分算法中分块的响应。然后依据响应置信度选择性的组合成分跟踪响应生成最终响应图。此外,当跟踪失败时,执行在线SVM重检测机制,恢复对目标的准确定位。在OTB2015数据集上进行实验,相比于Staple算法,距离精确率提升了5.2%,重叠成功率提升了5.0%。(3)从决策级多线索融合思路出发,将不同空间尺寸的多尺度相关滤波模型相结合,提出了一种基于相关滤波的串级融合目标跟踪算法。不同空间尺寸的相关滤波器,在面对不同挑战因素时,跟踪表现会有很大的差异。并且借鉴检测任务中串级结构逐级精确化结果的优点,将多个不同尺寸模板的相关滤波器串级依次连接,以各级滤波器的置信度分数为依据,自适应融合各级预测结果。在OTB2015数据集上进行实验,相比于KCF算法,距离精确率提升了11.0%,重叠成功率提升了19.6%。(4)从决策级多线索融合思路出发,将相关滤波与颜色模型相结合,提出了一种基于相关滤波和颜色模型的串联-并联协同目标跟踪算法。针对单一跟踪模型普适性较差,以及完全合理的自适应权重算法难于设计。构建了基于串联相关滤波跟踪成分和并联颜色模型跟踪成分的框架,以弥补模型之间的缺陷,提高跟踪的稳定性。并且在串联跟踪成分中,提出两种不同尺度模板的改进型相关滤波算法,将它们串级组合由粗到精逐级定位。最后以串联-并联框架中各跟踪成分的鲁棒性得分为依据,选出最可靠的跟踪结果。在OTB2015数据集上进行实验,相比于MCCT-H算法,距离精确率提升了0.7%,重叠成功率提升了1.9%。
其他文献
以一道题目为例,论述求解机械波传播中两质点振动速度相同的时间问题时,步步振动推算法将两质点的振动分步分时段推算,清晰明了,但过程较麻烦,适合求解特殊位置特殊时间的质点;平衡位置对称法根据距平衡位置相等的两质点的振动速度相同,巧妙地解决了空间和时间都有周期性的问题;振动函数求导法充分借助数学工具,将复杂的物理问题通过数学构建函数关系,再运用数学方法求解,适合解决非特殊位置非特殊时间的问题。
期刊
拷贝数变异作为一种常见的结构变异,通过DNA序列重排或非同源突变机制直接或者间接地影响基因,除了产生遗传多样性,也成为人类遗传病、肿瘤等疾病的一个重要致病因素。在高通量测序技术迅猛发展的影响下,对人类全基因组结构变异检测方法的研究成为目前人类基因组研究方向的热点和难点。下一代测序技术因为通量高、速度快和成本相对较低的特点提供了海量的基因组测序数据,准确地从这些数据中找出变异区域并确定变异类型是基因
学位
期刊
背景:胃癌是一种最常见的恶性肿瘤之一。与日本、韩国等胃癌高发国家相比,我们国家胃癌患者的早期诊断和早期治疗比例仍然偏低,大多数患者就诊时已处于肿瘤晚期,失去了手术切除的机会,姑息性化疗是唯一的治疗手段。质子泵抑制剂(Proton pump inhibitors,PPI)作为抑酸药物,在临床尤其是消化科临床应用非常广泛,是治疗酸相关疾病例如反流性食管炎GERD的首选药物。实体肿瘤的代谢具有一大特征,
学位
<正>各位领导、各位来宾、各方代表:大家好!很高兴有机会参加《商品售后服务评价体系》和《商业企业品牌评价与企业文化建设指南》两项国家标准宣贯活动。我谨代表商务部流通业发展司对此次活动的顺利举行表示诚挚的祝贺,对商业联合会、零售供货商专业委员会及广大企业多年来
期刊
期刊
在有机合成中,往往是重合成、轻检测,针对反应过程分析的报道较少,使得实验重复性较差,所以对于有机合成的全面分析显得十分必要。本文以基础的紫外-可见分光光度法建立一套在不中断反应、不经分离的前提下即可对各物质浓度进行实时检测的分析手段,补充了许多有机物的紫外光谱行为数据。同时与质谱法相配合,对本文所研究的苯基双胍合成、席夫碱合成、Biginelli反应进行一定程度的机理解释、补充完善。本文研究内容如
学位
本文主要采用高频算法对覆盖等离子体目标的电磁散射特性进行研究,其中高频算法包括物理光学法、弹跳射线法以及射线追踪算法,覆盖等离子体目标包括覆盖均匀等离子体目标,覆盖非均匀等离子体目标以及覆盖等离子体鞘套目标。物理光学法对于电大尺寸目标的电磁散射问题研究十分有效,其物理概念清晰、易于编程,并且有计算机资源消耗少,计算速度快的优点,但对腔体目标及表面耦合作用强烈的目标无法得到其准确的雷达散射截面结果。
学位
汽油中苯胺类物质的精准分析对于加强油品质量监管、环境保护等具有重要意义。红外光谱技术以其简便、快捷等优势,被认为是汽油添加剂检测的有效工具。然而,汽油成分的复杂性及环境因素干扰导致红外光谱技术检测过程中产生大量复杂光谱,如何消除无关光谱信息以实现汽油添加剂的准确定量分析是目前面临的难题之一。本论文基于汽油添加剂检测的现实需求出发,以苯胺类物质为研究对象,开展了红外光谱技术结合化学计量学的汽油中苯胺
学位
<正>机械波的多解问题是高中物理的一个难点,也是历来高考中的热点.学生在求解机械波问题时,往往由于对波动的实质理解不深刻、对题目中隐含条件挖掘不透彻、对已知条件使用不全面等,常常会出现解答不完整而造成漏解.本文限于横波沿一条直线传播的情形,就常见的机械波多解问题通过剖析其成因进行归类例析,力求帮助大家掌握解决此类问题的方法.一、造成波动问题多解的原因有传播方向、波长大小、波形周期、质点振动方向、传
期刊