基于Siamese网络的视觉目标跟踪

来源 :中南民族大学 | 被引量 : 0次 | 上传用户:jacklee12345678
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉目标跟踪是计算机视觉领域一个重要研究方向,在自动驾驶、视频监控、人机交互、医疗诊断等众多领域有着广泛的应用。经过多年发展,视觉目标跟踪技术取得了巨大进展。然而受目标外观和光照变化、背景干扰、遮挡等因素影响,实时有效的视觉目标跟踪仍然面临很大的挑战。随着深度学习的崛起,基于神经网络的视觉目标跟踪已成为主流研究方向,其中基于双胞胎(Siamese)网络模型的方法在目标跟踪领域表现出了优异的性能。这一类方法将跟踪问题转化为验证问题,通过训练权重共享的神经网络,构建目标模板,逐帧输出搜索区域与目标模板的相似度置信图,将置信度最高的区域标定为目标位置。基于Siamese网络的跟踪方法在跟踪精度和实时性方面均取得了较优异的性能。近年来,围绕Siamese跟踪架构的模型改进工作已成为领域热点;本文围绕基于Siamese网络的视觉目标跟踪开展研究,主要内容如下:(1)针对现有Siamese网络仅依赖单一帧特征建模、以及卷积池化操作丢失结构信息等问题,将注意力机制引入Siamese框架,通过设计时空域注意力模块,有效融合目标不同时刻的外观信息,达到突出有用特征重要性、抑制冗余及干扰信息的作用。该模型具有以下优点:(i)空域注意力机制克服了卷积神经网络感受野受限以及池化操作丢失结构细节的问题,充分利用了目标空域各特征点之间的结构依赖关系,有效缓解复杂场景中因目标外观形、遮挡等导致的跟踪性能下降;(ii)时域注意力机制构建目标各历史帧之间的依赖性,丰富外观特征的多样性,有效提升表达学习的鲁棒性。实验结果表明,改进的方法对跟踪的精度有进一步的提升。(2)在存在相似目标干扰的场景中,基于视觉一致性的注意力机制模型易导致跟踪漂移。本文研究了一种融合外观及运动特征的Siamese网络单目标跟踪方法,提出了一种基于光流运动估计的外观对齐模型,将运动信息引入Siamese网络。实验结果表明,通过融合光流模型与时空域注意力机制外观模型,实现了运动信息与视觉特征的互补,缓解了相似目标干扰问题,较显著地改善了跟踪性能。
其他文献
以往的初中劳动教育重视对学生劳动成果的评价,忽视对学生在劳动过程中所表现出的劳动态度、劳动习惯和劳动意识等方面的评价,难以“让所有的孩子都能享受劳动的快乐”。教师可以在深入研究评价基础、评价方法和评价内容的基础上,建构兼具激励性和长期性为导向的初中劳动教育进阶式评价,引导学生进行劳动实践,帮助他们在劳动教育中得到持续稳定、全方位的发展。
期刊
去蜂窝大规模MIMO系统消除了“蜂窝”的概念,以分布式天线系统为原型,通过部署大量分布式接入点(Access Point,AP)缩短AP与用户间的距离,减少路径损耗,获得更大的宏分集增益。然而用户数过多或相干间隔持续时间过短会导致用户重用导频,将产生严重的导频污染,影响系统的性能,本文针对去蜂窝大规模MIMO中导频优化策略开展了研究工作。针对去蜂窝大规模MIMO系统中导频污染问题,提出了一种基于迭
学位
目前文物安全形势严峻,频繁发生的古墓葬盗掘违法犯罪案件,已造成我国经济和文化的重大损失。视频监控已成为古墓葬防盗掘的重要技术手段,然而,目前监控视频往往在古墓葬盗掘事件发生后,才被用来作为取证的手段,而且在取证时,又存在从海量存储视频中搜寻与古墓葬盗掘相关动作事件信息效率低的问题。本文引入了人工智能技术,设计并实现了针对古墓葬盗掘的异常行为识别系统。该系统采用人工智能技术对监控视频进行动作检测,然
学位
千层塔为我国珍稀药用植物,其主要活性成分(石杉碱甲/乙等)具有显著的乙酰胆碱酯酶抑制活性,是治疗阿尔兹海默症的重要原材料。然而,目前野生千层塔资源短缺,已满足不了日益增长的市场需求。植物内生菌与宿主长期的共生关系,使得部分菌株可以产生与宿主相同或相似的生物活性物质。本研究通过高通量测序技术分析了3年生千层塔根、茎、叶组织中内生菌的多样性及其组成特征,采用传统微生物培养技术从植株中分离了可培养内生菌
学位
兰科植物白及(Bletilla striata),具有良好的药用价值和开发前景。近年来,由于在制药、医疗、美容等领域的广泛应用,国内外对白及的需求迅速增加,致使野生白及被过度开采,导致其野生资源短缺。植物内生菌是具有高度多样性的微生物资源,生活在健康植物的组织、器官内以及细胞和细胞间隙内而不引起植物病变。其具有促进宿主抵御病原菌和外界条件的胁迫等作用。在长期的进化过程中,由于基因交流,植物内生菌能
学位
X射线(X-ray)是一种短波长、高频率的电磁波,因其具有高能量、强穿透的特点,在工业检测、医学诊断、航空航天、核科学技术等领域展现了重要应用价值。当前相关领域的快速发展对研制灵敏度高、响应和恢复速度快、剂量检测限低、能量和空间分辨率高、稳定性和可重复性良好的X射线探测器提出了新要求。近年来,研究人员对新型X射线探测器的研究越来越重视,也取得了一些进展,但探测器性能仍有较大的提升空间,稳定性也亟待
学位
安徽省铜陵市牡东农业专业合作社在2020年夏汛后合理安排茬口,灾后及时补改种四季豆,精选2个四季豆品种进行地膜栽培、合理肥水,补(改)种的10 hm2四季豆,产量高达320 t多,不仅将农民因灾造成的损失减到最小,还填补蔬菜伏缺、丰富市民的菜篮子,充实了菜农的钱袋子,也给周边农户带来了可观的经济收益。
期刊
小麦替代玉米作为能量饲料在家禽饲养中已有较多应用,然而由于小麦含有非淀粉多糖(简称NSP),使小麦具有一定的抗营养特性。在饲粮中添加NSP酶可以一定程度的降解小麦NSP,从而降低抗营养作用,且添加复合酶的效果优于单酶。目前NSP复合酶大部分是以复配形式生产,首先需生产多种单一酶,生产较复杂。利用酵母表面展示体系可将各种酶展示表达在酵母细胞的表面作为全细胞催化剂,具有固定化酶的特性,制备简单且易于回
学位
肺络是络脉系统的一个分支,也是经络系统的重要组成部分。笔者通过查阅古代文献,结合现代研究发现,肺络包括循行于体表的肺经之阳络和联络本脏的肺脏之阴络。肺经之阳络位置表浅,主要联络机体表里内外,肺脏之阴络位置较深,对肺发挥其生理功能起着至关重要的作用,两者密不可分,相辅相成,临床研究大多是针对在表的肺经之阳络,而对于在里的肺脏之阴络却少有研究。并通过对查阅的文献进行分析、整理,重点从肺络的概念、组成、
期刊
透明导电薄膜作为一种性能优异的光电子半导体材料,已经得到了深入的研究和广泛的应用。在众多的透明导电薄膜材料中,氧化铟锡(ITO)因其光电特性尤为突出而深受科研人员的喜爱,但由于元素铟在自然界的存储量比较缺乏、成本高昂和有毒性等多种原因限制了ITO薄膜更广泛的应用,而掺杂氧化锌(ZnO)薄膜不仅原料易得、价格低廉、无毒无污染,同时还表现出了优良的光电、压电等性能,因而具备替代ITO薄膜的巨大潜力。目
学位