基于孪生神经网络的目标跟踪研究

来源 :大连海事大学 | 被引量 : 0次 | 上传用户:jsw10000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目标跟踪是计算机视觉领域中的研究热点,被广泛应用于我们的生活中。目前基于深度学习的目标跟踪方法取得了巨大的成功,然而在跟踪过程中存在诸如背景杂斑、低分辨率、尺度变化、目标形变等干扰因素,使得在目标跟踪上的研究依然存在许多挑战。为了解决上述问题,本文以孪生神经网络模型为理论基础,结合在实际跟踪环境下的挑战,提出了两种具有创新性的高性能跟踪算法,具体的研究内容以及成果概括如下:(1)提出一种基于注意力机制的孪生网络跟踪算法。在主干网络Alex Net中加入一种由通道注意力机制以及空间注意力机制组成的自注意力机制模块,让网络模型重点关注图像中与当前跟踪任务相关的关键信息,解决在背景杂斑以及低分辨率等干扰因素下算法跟踪性能下降的问题。(2)引入一种由通道注意力机制并结合孪生网络双分支特点组成的互注意力机制模块。在孪生网络中,模板分支相比搜索分支更加关注目标自身信息,但缺乏丰富的目标周围有用信息,而搜索分支相比模板分支则含有较多的目标周围干扰信息,利用该模块可以解决传统的基于孪生网络的跟踪算法在特征提取过程中,模板分支和搜索分支均无法获取对方重要信息的问题,进一步提升网络模型对复杂场景变化的适应能力。(3)提出一种基于可变形卷积和候选区域的孪生网络跟踪算法。使用Res Net网络模型作为特征提取的主干网络,增强网络模型的特征表达能力;使用通道注意力机制,利用图像各通道间的非线性相互作用,让网络模型对图像通道间的关系进行建模,提升网络模型的判别能力;并引入候选区域网络,解决传统的基于孪生网络的跟踪算法在面对目标发生尺度变化时需要进行多尺度预测导致跟踪速度下降的问题,同时使用深度互相关操作,在提升训练稳定性的同时进一步降低网络模型的参数量。(4)使用可变形卷积来构建可变形残差模块,利用可变形卷积感受野灵活的特点,来提升网络模型对形变目标的建模能力,该模块主要解决传统卷积在图像固定位置采样导致的无法有效拟合形变目标的问题。最后,在公开数据集上进行对比实验,将本文算法与其他算法进行大量的实验对比分析。根据实验具体数据证明了本文提出的两种算法均可有效提升跟踪性能,并且可以很好适应各种复杂的跟踪场景。
其他文献
在水下场景中捕获的图像由于光的选择性吸收和散射作用往往存在颜色失真、亮度不均衡、清晰度差、对比度低等问题。而生物在适应自然环境的过程中进化出了一套能够对外界视觉信号进行密切整合的视觉系统,目前越来越多的研究者在图像增强领域模拟视网膜机制进行建模,并在陆上图像增强方面取得了较好的效果。本文通过对水下图像降质因素的分析,并结合视网膜处理图像信息流的生理机制,提出了一种基于视网膜机制的水下图像增强方法。
学位
智慧航道的建设作为国家智能海上交通建设工作重要部分,交通运输部已将其列为重点研究课题。航道作为航运发展的基础设施,大力推进智慧航道建设,实现水文气象监测、水位遥测遥报、视频监控、流量监测全域感知,为船舶提供精准助航、高效过闸、水运信息等服务。航道的实时监测对加快智慧航道建设、提升航道管理效率、加强智能化信息服务具有重大意义。首先,在智慧航道应用背景下,本文针对一种基于智能航标(Intelligen
学位
单脚印足迹图像不仅采集便利、适用性广泛,而且稳定性和可靠性较高,因此研究单个足迹的生物特征识别算法对于刑事侦查工作具有重要的意义。目前,基于单脚印的足迹识别研究主要是对于同一种设备采集的足迹进行识别。在刑侦实际应用中,已登记的足迹和现场待识别的足迹所采用的成像方式通常不同,足迹图像所包含的信息也有所不同。本文将利用不同成像方式采集的足迹图像的互相识别称之为跨模态足迹识别,其是足迹识别在刑事侦查领域
学位
在建设海洋强国战略背景下,由于远洋运输具有稳定可靠、运载货物量大等特点,航运事业已经发展成为我国进出口贸易的主要运输形式。近年来随着世界贸易及我国经济的飞速发展,来往于全球航线上的各类远洋船舶却带来了外来生物入侵等较为严重的生态环境问题:船舶压载水中含有各类浮游生物、细菌及其它微生物,如不经过检测处理必定会对其接收处的海洋环境造成灾难性影响。由于微藻是船舶压载水中所含的主要生物,所以对其检测处理是
学位
汽车底盘的异物检测对于公共安全具有十分重要的意义。汽车底盘夹带危险品和违禁品,影响着人民生命财产安全和社会稳定。现有的相关车底检测的技术主要依赖于人工检测和二维图像检测,容易出现漏检情况。本论文面向行驶汽车设计了汽车底盘的三维成像系统,研究了汽车底盘多目相机三维重建算法。具体研究情况如下:设计了基于五目相机的汽车底盘图像采集系统方案。图像采集系统与车辆行驶方向垂直放置,车辆在系统的上方通过时,相机
学位
我国作为苹果的生产大国,目前在苹果分拣和质量检测环节,多用人工分级和机械分级,人为影响因素多,费时费力,并且由于分级标准不统一,导致最终检测结果准确率并不高。因此,如何快速、准确、客观地进行苹果分级,成为目前分级领域的研究重点。而在苹果品质检测方面,国内外虽也进行了一些研究,但大多仅停留在对苹果的内部成分进行检测与分析,如硬度、PH值等,且检测价格高昂。对于消费者而言,不仅希望得到外观美丽的苹果,
学位
近年来随着长江沿江经济和航运业的快速发展,船闸货运量不断攀升,三峡、葛洲坝船闸成为长江中上游重要节点的水利枢纽。但由于船闸的满负荷、超负荷运转使用,其结构安全隐患也愈加明显。船闸人字门在复杂的深水环境中频繁启闭,受低速重载的工况条件、闸门两侧巨大水压及启闭机运行状态的影响,会引发门体小位移量的跳动,产生门体共振、应力集中释放的情况,损伤门体结构,严重时将会发生门体病变,影响通航效率并造成严重的经济
学位
伴随社会的不断发展,高速里程数不断增长,道路管理与维护的需求也日益增长,若不及时对路面破损进行处理,路面破损与自然灾害相互作用形成恶性循环,威胁人们的行车安全。传统的人工检测效率低、检测速度慢、误差较大。由于路面中存在的诸多干扰,现有的路面图像处理算法误检较多,难以运用到实际的路面检测。根据实际路面破损检测中存在的多种挑战,本文研究了一种用于解决复杂干扰条件下的路面破损检测算法。该算法有效减弱了路
学位
随着海上交通的不断发展,船舶流量的增加给海上管理带来了巨大的挑战,对近海及远海船队无缝监测成了海上监管的重要问题。本文基于企业的项目,实现近海船队的岸基整体监控,以及远洋船队船之间的信息一体化功能。本文利用嵌入式技术、数据采集技术、无线通信技术,设计实现了一种基于嵌入式的船舶信息采集及传输系统,该系统以软硬件结合的方式,采集船队内各船只的加速度、角速度、角度、磁场、经纬度、卫星定位、水平和垂直位置
学位
无透镜数字全息显微成像系统具有体积小、成像视野大、可通过计算机处理图像信息、方便携带等优点,在微生物检测、医学研究等方面有较大的应用前景。在无透镜数字全息显微成像系统中获取准确的离焦距离是无透镜数字全息显微成像获得清晰的重建图像的关键。本文研究的基于无透镜数字全息显微成像系统的自动聚焦算法通过数学计算得到全息图像准确的离焦距离,无需使用外部硬件获取成像物体离焦距离,成功实现了准确、便捷的自动聚焦。
学位