基于显著性的视觉目标跟踪研究

来源 :电子科技大学 | 被引量 : 2次 | 上传用户:zhanglq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着视频采集设备的成本不断降低,其普及率越来越高,使得各种来源的视频数量正在急速增长。如何解放人力利用机器对视频进行自动分析存在迫切需求。目标跟踪作为视频自动分析系统的关键,对理解视频内容、分析并识别目标属性起着重要作用,因此一直是学术界和工业界关注的研究课题。由于实际场景中存在诸多干扰因素,如目标和场景的动态变化、背景中相似物的干扰、目标的变形遮挡、尺度变化和旋转、以及运动模糊和噪声等,目前设计稳定可靠的跟踪器仍然是具有挑战的任务。心理学研究表明,人的视觉系统存在选择注意机制,使我们在处理视觉信息时能够排除干扰,快速有效地从场景中筛选出感兴趣对象信息。这种数据的筛选能力能够极大地提高信息处理的效率。因此,本文基于人眼的视觉注意机制,开展了基于显著性的目标跟踪研究。本文首先对视频显著性检测问题进行研究,然后研究了目标跟踪中的外观建模与特征关联匹配问题,最后从人眼的视觉注意机制入手,研究结合显著性检测的目标跟踪算法,以期提升跟踪性能。本文主要的研究内容和创新点包括如下几个方面:第一,针对视频中待跟踪目标的自动获取问题,本文提出了基于底层视觉特征的视频显著性检测方法。该方法首先检测空间显著性和时间显著性,然后通过运动熵将二者动态融合。空间显著性检测考虑三个因素:像素的空间位置,双对比色和相似性分布。时间显著性检测利用光流特征计算运动的全局对比度。为了抑制场景中的运动噪声提出一种平均光流直方图(HOAOF)方法。相比于传统的视频显著性检测方法,当存在摄像机和显著对象同时运动时,本文方法依旧能得到较好的检测结果。第二,针对场景中底层特征无法反映由高层语义对象驱动的视觉显著性问题,本文提出结合底层和高层特征的视频显著性检测方法,并以新闻视频为例研究了特定类型视频中的高层语义特征对显著性检测的影响。其中自下而上注意力模型利用底层的视觉刺激,采取局部和全局相结合的方式检测图像显著谱和运动显著谱。在检测图像显著谱时引入四元数图像的概念,提出一种多尺度多颜色通道的四元数图像显著性检测方法。在自上而下的注意力模型中通过检测视频图像的通用高层语义特征(如人脸、行人和车辆),以及新闻视频中特有的高层特征(如播报员和闪光灯),生成自上而下的显著谱。最后,将自下而上显著谱与自上而下显著谱融合得到视频显著谱。通过结合高层语义特征,本文方法能够获得和人眼更相近的检测结果。第三,针对跟踪过程中的目标遮挡、旋转和尺度变化等挑战,本文提出基于一致性特征点选择的目标跟踪方法。该方法利用特征点构建目标外观模型,在跟踪过程中采用空间几何约束定义特征点的一致性,然后通过一种改进的密度聚类方法选择与目标一致的兴趣点。另外为了适应跟踪过程中目标外观的变化,本文还采用颜色直方图作为目标的参考模板,用于计算跟踪结果的置信度,然后据此更新目标的外观模型。该方法能够克服目标旋转和尺度变化,而且在发生部分遮挡甚至完全遮挡时也能够重新跟踪到目标。第四,针对特征点在低质量图像以及平坦图像区域上检测和匹配存在可靠性下降的问题,本文提出基于一致性判别区域的目标跟踪方法。该方法首先采用基于样例的SVM选择出具有高判别性的区域,利用这些判别区域对跟踪目标的外观进行建模,然后对这些判别区域分别进行相关滤波跟踪,在跟踪过程中计算每个判决区域的一致性。本文根据两点要素定义判别区域的一致性:可跟踪性和预测能力。根据一致性对跟踪器和区域外观进行自适应更新,并用于最终目标的全局定位。实验结果显示,利用一致性的判别区域进行目标跟踪能够有效提升跟踪器的性能。第五,针对单一外观模型和固定特征难以适应目标在复杂场景中面临的外观变化问题,在本文视频显著性研究的基础上,提出一种显著性特征加权的目标跟踪方法。该方法在目标外观构造上采用两种模型的融合,一种是结构保持的统计外观模型,另一种是自适应显著性特征统计外观模型。其中在构造显著性外观模型时,能以在线的方式自动选择有判别性的显著性特征。目标跟踪是在粒子滤波框架下进行,样本粒子的权重通过融合两种观测模型与参考模型的似然性计算得到,其中融合权值会根据两种外观模型的似然性动态调整。该方法构造的外观模型能够有效利用显著性特征改善跟踪效果。
其他文献
通过分析陷落柱的形成机理,研究工作面通过陷落柱的有效措施,以推动工作面推进速度,保障工作面的持续推动,提高开采速度,为今后过陷落柱工艺提供依据。
随着科技的发展,近年来图像及视频数据量呈爆炸性增长,同时对此类数据的分析与应用需求也在迅猛增加。其中,从图像与视频数据中获取信息是一个重要的基础工程,相比起计算机,
本文用数据统计的形式,阐述了近几年我国粗钢产量、废钢消耗量、废钢单耗、电炉钢比的情况,并指出所存在的问题;剖析了制约废钢大量应用的几点影响因素,并以长流程转炉炼钢和
黄金所具有的独特的商品属性、货币属性和金融属性使其成为人们生活中不可或缺的组成部分。其金融属性则决定了黄金具有不同于其他一切投资品的独有的投资价值,已经成为了当
在表演教学中,我们会常常遇到这种情况,表演教师喜欢让表演的学生选择和他的气质、性格相近的角色来表演,这样可以不怎么费力气就可以塑造一个观众认可的形象。其实这是我们
城市基础设施建设活动的不断发展要求城市管理者在规划管理的过程中应该革新自我观念,促进管理活动模式的优化升级。以城市排水系统的规划活动为例,当前所依据的传统的排水体
目的评价糖尿病营养教育对2型糖尿病患者血糖、血脂及慢性并发症的控制效果。方法选取2012年1月至2012年12月在哈尔滨医科大学附属第一医院内分泌科就诊的1336例确诊的2型糖
随着新课程改革的不断推进,现代教学理念对于高中政治课堂教学提出了更高的要求。传统高中政治课堂教学成效相对较差,教师在教学过程中的付出与收获之间存在较大的不平衡。为
通过阐述我国焦炉煤气净化技术的发展过程,简单介绍焦炉煤气净化技术的实际应用情况,同时详细分析了焦炉煤气净化技术存在的一些缺陷,对其发展前景进行研究。
<正> 治疗方法:基本方剂用秦氏所提出的黄茋建中湯(黄茋、白芍、桂枝、甘草、炮姜炭)。本方适用虛塞型胃脘痛其症狀表現为.胃痛日久,痛处喜按,飢餓則痛,得食則减,喜热畏涼,舌
期刊