基于全卷积孪生网络的单目标跟踪算法研究

来源 :南京信息工程大学 | 被引量 : 1次 | 上传用户:qj13143344
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
全卷积孪生网络目标跟踪算法由于其很好地平衡了精度和速度的关系而得到快速发展。但是仍然存在一些难点限制其跟踪性能,如背景混杂、遮挡以及形变等。特别是在相似背景信息干扰下会出现跟踪漂移,而且现有的基于锚框生成的目标跟踪算法超参数多,带来额外的复杂度和计算消耗。此外,只利用卷积神经网络提取的单一层语义信息做跟踪预测会导致图像信息利用不充分,不能形成更鲁棒地跟踪,而简单的将多层特征自适应融合的效果并不理想,需要应用一种合理的充分利用不同层特征对应优势来跟踪预测的方法。针对上述问题,本文提出两种方法去解决,具体研究内容如下:(1)为了避免超参数过多,同时抑制目标附近干扰物影响,通过重新设计孪生网络跟踪算法的分类划分与回归方式,改变采样策略,提出了一种基于中心像素加权的无锚框孪生网络跟踪算法(CPWSiam)。首先,引入无锚框的回归方式,逐像素进行分类预测和回归目标框,避免了超参数过多和计算复杂度增加带来的影响;其次,对像素点进行了更精确的正负样本划分,使正样本像素点包含的背景更少,提升特征判别能力;最后,通过中心加权采样的方法,体现出正样本像素点不同的关注度,降低临近相似背景的影响,使跟踪器能够做出更精确预测。在VOT2018数据集上的实验结果表明,CPWSiam的EAO指标高出Siam RPN++2.9个百分点,达到了先进的性能。(2)为了充分利用图像不同层次特征,同时发挥Res Net50网络的特征提取能力,在CPWSiam算法只使用单一层次特征的基础上,结合加权投票法,对Res Net50不同阶段提取的特征经分类回归网络后得到的分类得分图和回归图分别进行加权投票,提出了多层投票孪生网络目标跟踪算法(MVCPWSiam)。通过分层投票设计,避免了常规方法对于多层特征直接自适应融合预测的简单处理方式,从而实现更精确目标状态预测,进一步提升了本文算法性能。在VOT2018数据集上的实验结果显示,MVCPWSiam的EAO指标高出CPWSiam 1.6个百分点,同时在多个属性挑战上的优势进一步扩大,体现了MVCPWSiam算法良好的泛化性能,能够实现更鲁棒地跟踪。
其他文献
对硝基苯酚和硝基苯是水体中优先控制的污染物。稻壳是稻谷加工的废弃物,产量巨大。本研究采用稻谷加工废弃物稻壳进行限氧热解制备稻壳生物炭,并采用碱改性稻壳生物炭显著提高其吸附量,采用元素分析仪、比表面积测定仪、XRD、SEM、EDS等仪器对稻壳生物炭进行表征,本研究提供一种经济有效地去除水中对硝基苯酚和硝基苯的方法。本论文主要研究结果如下:在773 K温度下,限氧热解2 h和的稻壳生物炭吸附性能好,吸
学位
<正>爱游戏是幼儿的天性。笔者认为,教师可以将幼儿对游戏的热爱迁移到劳动教育中,利用富有游戏趣味的劳动方式,培养幼儿良好的劳动品质,在劳动教育中进一步提升幼儿的动手能力,激活幼儿的劳动意识,培养幼儿的劳动能力,促进幼儿心智的发展。在幼儿教育中,教师要将游戏与劳动相结合,在提升游戏教育效果的同时,培养幼儿的劳动意识,促进幼儿的成长进步。
期刊
人体动作识别是深度学习中重要应用任务之一,精准识别人体动作所表达的语义信息可以为人们生产生活提供便利,在人类生活的各个方面都具有重大意义。现有人体动作识别方法大部分是基于视频数据和骨骼点数据,采用深度学习的动作识别方法,这些动作识别方法在当时已经取得十分不错的成果,但仍然存在一些不足之处:一方面,人体骨骼点中存在丰富的空间和时间特征,模型对这部分特征的关注度不足;且现有方法对于人体动作特征的提取仅
学位
随着工业制造4.0的到来,制造系统向着多品种小批次的方向转变,柔性作业车间生产模式得以广泛应用。人工蜂群算法(Artificial Bee Colony Algorithm,ABC)自提出以来因其机制灵活、参数少等优点被广泛关注,非常适合结合其他算子设计混合算法求解各类问题。本文将ABC与多种优秀算子和策略相结合,设计了不同的混合ABC算法,着力于3种柔性作业车间调度问题(Flexible Job
学位
传统深度神经网络剪枝算法通常旨在消除网络中的冗余结构,以轻量化神经网络。然而,目前一些研究发现一个过参数化的随机初始化神经网络中的稀疏结构本身就具备很好的性能,并设计了一些剪枝算法以找到隐藏在过参数化神经网络中的稀疏结构。这些研究表明剪枝也可被用来寻找过参数化神经网络中的稀疏结构,本文重点研究了基于掩膜学习的神经网络剪枝算法,通过学习掩膜来找到过参数化神经网络中的稀疏子网络。本文具体进行了以下两个
学位
最近,国家为助力实现“碳达峰”和“碳中和”目标,由工业和信息化部等部门联合发布了《电机能效提升计划(2021-2023)》。电机各项性能的要求越来越高,考虑单个目标的电机性能设计已经很难满足现实设计需求,电机的多目标优化设计成为了电机达到高效节能目标的重要途经。本课题以一种新型轴向磁场永磁记忆电机(axial flux permanent magnet memory motor,AFPMMM)为研
学位
随机非线性系统指的是输入输出及干扰项存在随机因素或者系统本身带有某种不确定性的非线性受控系统,它可以在金融、股票清算、电力系统建模和人口动力学等方面提供一个良好的数学建模框架。对于控制系统来说,稳定性是研究控制系统首要解决的问题,所以近些年来,关于随机非线性系统的稳定性问题一直是专家学者深入研究的热点,并取得了一系列优秀的研究成果,但仍有许多关于随机稳定的问题值得近一步讨论和改进。因此本文研究了基
学位
随着科技发展和社会进步,各个领域对预测模型的精度、稳定性要求越来越高。近年来,深度学习中的循环神经网络(RNN)技术,特别是其与另一深度学习技术-卷积神经网络(CNN)相融合的CNN-RNN架构在预测中显示出强大优势。但基于RNN的模型在预测任务中存在滞后性,流行的CNN-RNN架构也未解决上述问题。注意到宽度学习系统(BLS)具有权重计算直接、运算快速高效的优点,本文尝试融合宽度学习和深度学习的
学位
显著性目标检测旨在识别出图像中最显著的对象与区域,目前已经成功地作为目标跟踪、物体识别以及语义分割等计算机视觉领域任务的预处理过程。传统方法大多依靠颜色,纹理等手工特征或者启发式先验来捕获图像的局部细节以及全局上下文信息,受制于特征的表达能力,在复杂场景中检测显著物体的能力大打折扣。近年来,卷积神经网络快速发展,得益于海量的数据以及模型强大的特征表达能力,基于深度学习的算法在性能上有了巨大提升。本
学位
海洋暖涡观测需要多智能体之间的协同以及任务分配,尤其是异构智能体之间的协同可以充分发挥不同智能体之间的特点。在多智能体的暖涡观测中,合理的任务分配可以保证系统以最小的代价完成全部任务,这是多智能体多任务问题的研究热点之一;路径规划是智能体在已知或者未知环境信息的前提下执行任务时,为智能体提供从起始点到终点的可行路线。以上述为前提,本文开展了面向暖涡观测的多智能体路径规划研究,主要研究内容如下:1、
学位