基于视觉注意机制的复杂场景下跟踪方法研究

来源 :北京大学 | 被引量 : 0次 | 上传用户:dh9998
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
即使受到全局遮挡、相似物干扰或者光线剧烈变化等复杂外界环境的干扰,人类仍然能够轻松地维持对某一物体的长时间跟踪。然而,现有的机器视觉系统在类似复杂环境下执行实时跟踪任务时往往会发生错跟、跟丢现象,有时甚至跟踪算法会完全失效。因此,如何在实时跟踪的前提下维持跟踪系统的高鲁棒性对于目标跟踪算法来说是一个巨大的困难,也是现阶段研究的主要方向。   提高实时跟踪系统鲁棒性的困难在于物体描述与模式搜索两个主要环节之间的相互制约。低运算量的模式搜寻方法必须基于简单的目标描述,然而这种简单的描述模型又无法完全合适的包含物体外观的全部信息,使得鲁棒跟踪在复杂环境下变得困难。相反,高层次的目标描述方法能灵活的处理外观变化,而这种处理的代价就是复杂的模式搜寻定位算法和高运算量,使跟踪的实时性无法得到保证。   针对现有实时跟踪算法在多种复杂环境下失效的问题,本文主要研究如何构建正确的目标描述模型使其适应性的正确包含物体外观信息,以及如何采取有效减少运算量的方法使得后续模式搜寻步骤快速有效进行,以解决目标跟踪算法中跟踪效率与计算资源之间的矛盾。   首先,本文在第二章探讨了基本mean shift跟踪算法,提出基于一种可变核的mean shift算子以引入物体描述的空间信息,用于解决相似物影响的问题,并在此基础上分析主流跟踪算法在解决跟踪效率与运算资源之间矛盾的不足之处。   其次,论文的第三章讨论了将视觉注意力应用于目标跟踪的重要意义,并详细介绍了视觉注意计算模型。神经心理学研究表明,人类视觉的注意力选择机制能在画面中快速检测感兴趣的物体区域,像过滤器一样从图像的庞大信息量中抽取出有效的信息。因此,第四章研究了引入视觉注意力转移下的遮挡处理算法。该算法利用视觉注意力机制的早期选择和后期转移两个核心过程来保证有限运算量的前提下获取更多关于丢失目标重检测跟踪的有用信息。   论文的第五章以视觉注意力选择计算模型为基础,建立视觉空间注意力和特征空间注意力合作机制下的目标跟踪系统(spatial-feature attentional visualtracking)。其中在建模阶段,视觉空间注意力能从当前帧中提出有限个具有良好定位特征的图像块,而无效或者相对无用的区域被直接摒弃。同时在学习阶段,特征空间注意力能加强那些能够很好的区分目标与背景的特征,忽略那些容易使目标和背景混淆的特征。由注意力合作机制得到的描述模型能极大地减少目标与背景之间的相似混淆性,同时,该模型的维持更新也只需要很小的运算量就能完成。   第六章对论文算法进行实验分析。为了验证算法的有效性,我们设计了16组共127607帧图像的多种复杂场景下视频对本文提出的遮挡算法和跟踪算法进行测试,其中包括镜头快速运动、物体反复长时间遮挡、光线变化强烈以及相似物干扰等各种困难情况。通过将基本mean shift跟踪算法、无参数跟踪算法等在同等条件下得到的实验结果与之进行比较,实验表明本文提出的遮挡算法能很好的处理各类复杂跟踪中出现的遮挡问题。而本文提出的基于注意力合作机制的跟踪算法能很好的解决高运算量和正确跟踪之间矛盾问题,该算法在保证实时性的同时提高了算法的鲁棒性。   最后,我们对全文的工作进行总结,并进一步对视觉信息加工原理进行分析,讨论未来工作中引进基于注意机制的稀疏编码模型可能性。
其他文献
目前的猪场废弃物处理技术大都集中在厌氧、好氧酵解、固液分离上。尽管这些技术是可行的,但由于成本高、操作复杂,在实际生产中很难推广及普及开来。养猪业是微利行业,必须寻找
LDPC码(Low Density Parity Check,低密度奇偶校验)由于其非常接近Shannon极限的纠错性能和高度并行的模块化译码算法,非常适合未来高速宽带通信的需要,已经成为当前通信领域的
高速、中等精度的模数转换器(ADCs)被广泛的应用在数字通信、视频处理等系统中。随着无线应用和便携设备迅速发展,单芯片集成的片上系统的已成为发展趋势。功耗成为必须关注的
学位
请下载后查看,本文暂不支持在线获取查看简介。 Please download to view, this article does not support online access to view profile.
射频识别技术(RFID:Radio Frequency Identification)是一项利用射频信号通过空间耦合实现无接触信息传递,并藉此信息来达到识别目标的技术。目前,RFID技术正在以其独特的优势逐
学位
GPS技术的迅速发展,在基础测绘、卫星导航、地球动力学、工程变形监测、运动目标的测速以及精密时间传递等方面己被广泛应用,尤其在地球动力学研究方面更是发挥着独特作用。GPS
随着计算机网络技术与无线通信技术日新月异的发展,人们对无线宽带接入提出更高的要求。无线网状网是一种新型宽带无线多跳网络,它以覆盖范围广、投资成本低、组网灵活等诸多优
随着空间探测技术的进步,尤其是空间通信技术的迅速发展,空间图像、视频等多媒体传输已逐渐成为一个重要的研究课题。空间数据系统咨询委员会(CCSDS,Consultative Committee of
学位
石系亚1号是二倍体亚洲棉,基因组A2,遗传性状稳定,抗枯萎病,耐瘠薄,耐旱抗寒,不易脱铃烂铃,相当于亚洲棉的标准系。为了充分发掘控制石系亚1号优良性状的基因,并对石系亚1号
朱霄剑的老师:霄剑曾获得校优秀队员、学习积极分子的称号。他的作品用沙画纸的特性与油画棒的颜色相结合,活泼地体现了他和伙伴们在一起的欢乐氛围。画面中的色彩空隙,由于