基于注意力机制的孪生网络目标跟踪算法研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:zoeshuwen88
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目标跟踪是计算机视觉领域一项炙手可热的课题,其定义是在有了初始帧跟踪对象的大小及位置信息的情况下,预测后续帧同一对象的所在位置及形状大小。随着近几年目标跟踪的迅猛发展,其中尤以孪生网络类目标跟踪性能更为显著。同时,目标跟踪方法在场景理解和无人驾驶等现实世界中也有运用,但在现实场景中会面临各种挑战,例如:尺度变化,形变,运动模糊,旋转等。针对以上现实场景中所遭遇的挑战问题,本篇文章在已有的孪生网络方法上结合注意力机制提出以下三种目标跟踪算法:针对特征提取不足以及缺乏上下文信息的问题,提出一种基于三重注意力和全局推理的孪生网络目标跟踪算法。首先,为了解决特征提取不足的问题,提出了一种三重注意力模型,该模型由三部分组成:挤压和激发块,空间挤压和激发块和通道挤压和激发块;其次,为了解决跟踪过程中缺少上下文信息的问题,在模板分支和搜索分支中添加了全局推理模型,这将生成两个不同的得分图。随着跟踪过程的继续,将这两个得分图相加,以分别构造不同权重的回归置信度图。对现有基准进行大量实验,证明提出的算法取得了较有竞争力的结果。针对网络过深导致部分特征丢失的问题,提出一种多层特征融合和并行自注意力的孪生网络目标跟踪算法。首先,用修改后的ResNet-50网络对模板图片和搜索图片进行特征提取,为处理网络过深而导致目标部分特征丢失,提出多层特征融合模块将ResNet-50后三层特征进行融合;其次,引入并行自注意力模块,这一模块由通道自注意力和空间自注意力组成,其中,通道自注意力可以选择性的强调对跟踪有益的通道特征,空间自注意力能学习目标丰富的空间信息;最后,区域提议网络来完成分类和回归操作,从而确定目标的位置和形状。实验显示,提出的算法在已有的测试数据集上取得了具有可竞争性的结果。针对模板特征提取不精确以及缺乏长程依赖的问题,提出一种多分支融合和全局上下文的孪生注意网络目标跟踪算法。首先,针对孪生网络中模板图片特征提取不充分的情况,提出多分支融合模块,这一模块将模板图片的低层特征分别与多个高层的特征相融合,从而提取丰富的模板特征;其次,为了获取后续跟踪图片帧中的长程依赖,在孪生网络的搜索分支加入全局上下文模块,获得具有长程依赖的搜索特征;最后,提出一种自注意力模块和交叉注意力模块,其中自注意力模块可以使目标跟踪过程中更加关注跟踪对象,交叉注意力模块可以联系搜索特征和模板特征,丰富两者之间的关系。实验结果显示,在多个常用的测试基准上,提出的算法是有效的,可以获得具有竞争力的结果。
其他文献
点云配准作为计算机视觉领域中的关键技术,广泛应用于三维重建、医疗影像等场景中,其是一项通过计算刚性转换参数将两个点云进行对齐的研究任务。在实际应用中,由于扫描设备与物体角度等一些原因,多数情况下所获得的点云并不是完整的,或许会存在残缺。因此,针对残缺点云配准算法进行研究是符合实际且必要的。相比配准完整点云,由于待配准的残缺点云是部分重叠的,因此更加具有难度。针对上述所存在的问题,本文开展了以下两部
学位
随着工业及制造业的飞速发展,传统的工业与制造业正在向现代化和自动化转型,大批的流水线工人正在被工业机器人取代。工业生产的效率大大增加,而工业机器人产生故障便会使生产线停运,严重影响生产的正常进行,工业机器人在工作时的状态信息获取难度大,机器人的维护成本高。用于工业中的信号采集分析软件能对工业设备在运行时的动态数据进行采集和分析,保障设备运行的稳定性,减少设备运行故障和不必要的停机,大幅节约维护成本
学位
随着科技的不断发展,设备逐渐向着机械化、自动化的方向发展,机械设备的稳定运行要求变得越来越严格。作为机械设备的重要组成部分,轴承由于其运行工况复杂而易发生故障进而影响机械设备的正常运行。轴承故障诊断是实时判断轴承运行状态,保证机器设备稳定运行的重要手段之一,故障特征提取作为轴承故障诊断中的重要步骤,具有非常重要的研究意义。然而,由于轴承早期故障特征不明显、干扰因素较多,给故障特征提取带来了很大困难
学位
随着航空航天技术的进步,对太空探索的研究不断深入了解,使得越来越多的航天器进入太空,导致其发生故障和老化程度程度增加,导致功能失效性增加。为提高航天器使用寿命,需要对其进行检查、维修。为此,本课题提出由Kresling、Miura和Waterbomb折痕构成的两种不同混合型机械手,能够实现弯曲、抓取操作。在混合型机械手设计、折痕几何分析、运动学分析、动力学分析方面展开了深入研究,具体内容如下:设计
学位
缆索吊系统具有跨径大、运输空间范围广的优点,是山区千米级跨度桥悬索桥施工的主要吊装设备。贵州省大跨度悬索桥开州湖特大桥采用缆索吊单侧起吊系统,完成钢桁梁的运输与安装施工,通过对缆索吊系统设计与安装方案探讨,总结缆索吊应用的难点,为其在大跨径悬索桥建设中的应用提供参考。
期刊
近年来,环境污染和石油资源的日益枯竭使得人们对燃油汽车的质疑越来越强烈,新能源汽车的发展成为各大汽车企业乃至各国专家学者关注的焦点。内置式永磁同步电机(Interior Permanent Magnet Synchronous Motor,IPMSM)以其高效、功率密度大和内部结构简单等特点在电动汽车电驱动系统领域得到了广泛的应用。由于实际控制变量的给定值与电机实际工况需求不匹配,可能会存在低速时
学位
多自由度球形电机仅通过一个关节就可以实现三自由度的复杂运动,多应用于军事、航空航天、医疗等各领域中,是当前电机研究中的一个热点。球形电机的动力学模型和转矩模型的建立是实现最终闭环控制中的重要一环,具有重要的研究意义。磁阻式球形电机作为一种新型的多自由度球形电机,同永磁式球形电机相比,因内部结构中存在铁磁材料,其转矩密度比永磁球形电机要高。但铁磁材料所带来的非线性问题,使得磁阻式球形电机的输出转矩不
学位
在21世纪的工业化浪潮中,工业零件表面缺陷检测已经普遍存在于工业生产的各个环节。近年来,基于卷积神经网络的工件缺陷检测技术逐渐取代了人工抽检的方式,表现出了智能化、精准化的特性。然而,在取得良好效果的同时,卷积神经网络日益增长的计算成本和存储空间,为工件检测任务在工业流水线或低算力设备上的实现带来了巨大的挑战。同时工业生产的实时检测,对模型的检测时间及精度也有着较高的要求。针对上述问题,本文从目标
学位
随着电机产业的蓬勃发展,传统的单自由度电机已经不满足于现代工业的需求,结构简单、定位精度高、动态性能好的多自由度永磁球形电机引起了国内外专家的广泛关注。球形电机在机器人、雷达跟踪系统、卫星控制器等领域有广泛的应用前景。然而,由于球形电机结构紧凑,散热性能较差,运行中电机内部不断升高的温度将对性能产生极大的影响,因此,永磁球形电机的温度场分析成为了电机稳定可靠运行过程中不可或缺的环节。本文将从损耗分
学位
轴承是旋转机械中的一种常见部件,在现代工业生产中扮演举足轻重的角色。轴承的安全平稳运行将直接影响整个机械系统的生产效率,然而,在实际工业环境中,轴承比其他机械部件更容易发生故障。轴承损伤的出现势必会影响机械设备的剩余寿命,致使工业产能下降,严重时还会危及工作人员的生命安全。因此,为减少因轴承故障造成的损失,应对轴承的运行状态进行监测与诊断,以保障机械设备的安全稳定运行。随着计算机技术的进步以及信号
学位