基于孪生网络的自适应目标跟踪方法

来源 :浙江工业大学 | 被引量 : 0次 | 上传用户:journey88
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目标跟踪是计算机视觉的基础研究内容之一,其广泛应用于人机交互、公共安全监测以及自动驾驶等领域。目标跟踪的主要任务是在给定目标初始位置的情况下,利用跟踪算法预测该目标在后续视频帧中的位置。在非结构化自然场景中,被跟踪目标将不可避免的遭遇光照变化、目标尺度变化、目标快速运动、复杂背景干扰等问题,这为长时鲁棒的目标跟踪带来了巨大的挑战。由于被跟踪目标存在目标表观多样性以及复杂背景干扰等问题,本文的研究旨在设计出一种鲁棒的自适应目标跟踪算法,以期解决上述问题。本文在探讨目标跟踪相关理论的基础上,基于孪生网络结构设计目标跟踪算法,从多特征融合以及注意力机制这两个方向入手开展本论文研究。具体完成的工作和创新如下:1.为了搭建基于孪生网络的目标跟踪算法框架,本文探讨目标跟踪的相关基础知识。在特征提取方面,分析手工设计特征HOG和CN以及深度特征CNN的实现机理。在算法框架方面,研究孪生网络基础结构以及相关滤波计算机制。在目标跟踪数据集方面,总结整理模型训练数据集、对比实验验证数据集以及对比实验评价指标等内容。2.大多数特征融合方法仅对多种特征进行简单的线性融合,为了探索特征之间的深度联系,本文提出一种基于孪生网络的特征融合目标跟踪方法。本论文研究期望建立特征提取与特征融合之间的联系,从而提升跟踪方法的自适应性。在模型训练过程中,通过后向反馈机制不断优化特征提取层和特征融合层中的参数,提升多特征融合的紧密度与灵活性。跟踪过程中,网络输出的融合结果可以更为可靠地预测目标位置以解决目标表观多样性以及复杂背景干扰等问题。最后,在实验数据集TC-128、OTB50以及UAV123上进行对比实验,实验结果表明本文提出的特征融合网络能够有效提升跟踪性能。3.本论文采用高维特征对目标进行表观建模。为了定量区分同种特征不同通道上的特征值对目标表观建模的重要程度,本文在特征融合网络的基础上,引入注意力机制,以提升不同特征通道上特征融合的自适应性。最后,在实验数据集TC-128、OTB50以及UAV123上进行对比实验,实验结果表明,与特征融合网络相比,结合注意力机制的特征融合网络可以更进一步地提升跟踪性能。本论文研究通过结合特征融合以及注意力机制,提出一种鲁棒的自适应目标跟踪算法。对比实验结果表明,本文提出的方法可以显著提升跟踪算法的性能。在本论文研究的基础上,对下一步工作进行展望,包括利用光流信息选取目标搜索区域,以及结合语义信息和强化学习等前沿技术进一步提升跟踪算法性能。
其他文献
<正>进入4月份以来,梨都安徽省砀山县酥梨销售又开始回暖,销量明显增加,但价格略降。目前市场上单果重150g以上的库存酥梨售价仅0.40元/kg,与春节相比下跌2.8%,而且近期价格攀
期刊
伴随着市场的不断转型变化,高校艺术设计教育出现了一些新的问题,以传授理论知识为主的传统教育模式已不适应时代要求。高校人才培养模式与用人单位所需人才脱节,导致创新、
立体基线法测向是相位干涉仪测向的一种,可以应用于复合制导的被动雷达导引头(passive radarseeker,PRS)中。如果测向误差过大,将直接影响反辐射导弹(anti-radar missile,ARM)命
阿尔都塞的意识形态想象性表述理论、马歇雷的想象性解决理论、伊格尔顿的想象性生产理论以及詹姆逊的政治无意识调和理论实际上是同根同源的,它们的共同源头就是马克思于185
本文通过对油茶籽粕的提取利用,研究了不同实验条件对油茶籽粕提取液中油油茶皂素含量的影响,并就油茶籽粕提取液对各种污布的洗涤效果进行了研究。实验结果表明:提取液中含有
<正>瑞士Simpel对其所开发的那种配备Bosch驱动系统和"NuVinci Harmony"全自动变速器的新型电动自行车(式样:男女两种),始终充满自信。据介绍,这家瑞士自行车生产厂商自2012
本文着重介绍了美国注册管理会计师和注册财务管理师的资格认证制度 ,并结合我国的实际情况 ,提出了将其引入我国的发展模式。最后 ,文章指出了引入注册管理会计师和注册财务
目的探讨壬基酚对大鼠胚胎发育的影响及机理。方法28只SD大鼠随机分为4组(对照组、50、100、200mg/kg壬基酚组),每组6~7只,妊娠第9~15天灌胃壬基酚,于妊娠第20天测量胎鼠身长、尾长和
谷氨酰胺(Gln)作为一种条件性必需氨基酸在人类医疗上得到了广泛的应用,有望成为一种极有发展前景的新型药物和动物营养性饲料添加剂。本文就其生理功能、在断奶仔猪日粮中的应
为检测商洛茶叶中重金属的含量,采用火焰原子吸收光谱法(FAS)和原子荧光光谱法(AFS)测定商洛茶叶中重金属铅、镉、锰、铜、锌、汞的含量。选取不同产地、采收季节以及不同厂家的