环境光照自适应的SLAM特征点提取与匹配

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:davidchen19
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着虚拟现实、自动驾驶和机器人等智能技术的发展,在相关的定位、建图与导航任务中,视觉SLAM(Simultaneous Localization And Mapping)成为了其理论的核心支持技术。目前大多数落地的视觉SLAM方案,主要由传感器、视觉里程计、后端优化、回环检测和建图几个模块组成,其用于视觉跟踪的视觉里程计模块依赖于手工设计的特征点而非真正的地标,这将导致SLAM系统在光照变换等复杂环境下的鲁棒性不高。因此,引入深度学习方法势在必行。本文旨在根据视觉里程计在不同环境光照下的效果分析,以传统方法为基础,通过深度学习方法,与ORB-SLAM(Oriented FAST and Rotated BRIEF-SLAM)系统相结合进行改进,并在此基础上提出一种基于环境纹理的动态阈值方法,提升视觉SLAM系统在光照变化等复杂环境下的鲁棒性和环境自适应能力。具体研究内容如下:首先,针对传统特征点提取与匹配方法对光照变化场景的鲁棒性差的问题,本文使用深度学习方法改进SLAM系统中的特征点检测和特征点匹配。通过自监督学习得到特征点检测器,并以此对图像中特征点进行检测提取。并通过使用基于图神经网络和注意力机制的特征点匹配方法,将特征点以及描述子编码成为一个特征匹配向量,随后通过学习注意力增强这个向量的特征匹配性能。通过计算特征匹配向量的内积得到匹配度得分矩阵,采用最优传输算法求解出最优特征分配矩阵。实验结果表明,改进后系统的视觉里程计部分具有更好的光照适应性和更鲁棒的匹配效果。其次,针对深度学习特征点检测器的阈值选择和提取特征点的均衡性问题,本文提出了一种基于环境纹理的动态阈值方法。通过图像中的纹理信息判断图像的特征分布情况,从而自动确定比较适合深度学习特征点检测器的超参数阈值,使得系统在不同场景环境下的都能从图像中提取到数量均衡的特征点,更利于后续的特征点匹配并以提高特征跟踪的精度。最后将上述动态阈值方法和特征点提取与匹配的深度学习方法,串联嵌入整体ORB-SLAM系统中。系统运行和实验结果均表明本文所提方法提升了SLAM系统的泛化能力,增强了系统在光照变化等复杂场景下的鲁棒性。综上所述,本文针对不同环境光照下SLAM系统的鲁棒性较弱问题,开发出一种基于深度学习特征点提取与匹配和动态阈值的改进ORB-SLAM系统,有效提升了SLAM系统的光照自适应性,该系统可以推广应用于更多复杂场景任务。
其他文献
目标跟踪问题是计算机视觉领域的热点研究课题,其通过视频序列第一帧目标的位置尺度信息,预测出后续帧目标的位置和尺度。目标跟踪技术广泛应用于安防监控、智能交通和体育赛事转播等领域。现阶段的目标跟踪面临许多挑战,比如运动模糊、低光照、目标被遮挡、背景干扰等因素,影响了跟踪器的性能。近年来借助深度学习的蓬勃发展,科研学者提出了基于深度学习的目标跟踪框架来解决可见光(RGB)目标跟踪问题,这些目标跟踪算法利
学位
当前,工程实践领域中的许多问题都可以转化为多模态优化问题,即要求同时找到问题的多个或全部最优解,以供决策者进行选择。进化算法因其具有全局选择和随机搜索的特点,常用于解决优化问题。然而,传统的进化算法的目的是找到问题的一个解,在处理多模态优化问题时,难以稳定地同时收敛到多个最优解。为了提高进化算法处理多模态优化问题的能力,需要保留种群的多样性,小生境技术的加入能够很好地实现这个效果。差分进化算法是进
学位
随着移动互联网技术的迅速普及,个人以及服务器上的图像资源已经越来越丰富,这个巨大的图像数据库中蕴藏着大量有价值的信息。视觉模式挖掘技术致力于对海量图像数据自适应分析并处理,以此获取有意义的规律并加以利用,该任务也是近年来多媒体数据挖掘领域的热点研究方向之一。视觉模式是指通常出现在图像中的基本元素,并且往往比原始像素传达更高级别的语义信息。它们可以捕捉视觉对象或者场景的本质内容,并代表了对象在视觉世
学位
大多数机器学习问题可以描述为数据项加约束项的形式。当约束项是稀疏约束,即需要求解的稀疏或在某个域内稀疏时,则问题转变为稀疏约束问题。稀疏约束问题具有广泛的研究意义,如图像去噪、信号恢复、超分辨率、压缩感知和神经网络剪枝等任务都属于稀疏约束问题。稀疏约束问题的求解越来越受到学者的重视。本文的目的是寻找性能优良的解决稀疏约束问题的方法,重点研究以下三个具体问题:1.近年来,可学习迭代收缩阈值算法(Le
学位
随着人流量的不断增大,出行需求的不断加深,出于安全的考虑,安检X光危险物检测方法需要不断更新不断改进才能满足人民日益增长的出行需求和安全保障,但目前的安检工作还是主要依托于人工检测,以人为主,智能检测为辅,安检的效率和速率一定程度上取决于安检人员的精力和经验,这样很容易发生错检和误检,安全隐患很大。如何实现高效快速的自动化检测是本文研究的重点。本文探索了YOLOV4目标检测方法在安检X光危险物检测
学位
遥感目标检测技术旨在对遥感图像的目标实现定位和识别,在民用和军事等领域发挥着重要的作用。然而,实际场景下的遥感目标检测面临着诸多问题和挑战。比如,如何解决由于样本标记工作专业性强、成本高导致的标记样本缺失的问题;如何有效挖掘遥感图像中复杂场景下的目标特征,在不影响检测效率的情况下提高检测精度;如何更高效地训练检测器,让特征层提取出的特征更好地发挥作用。针对上述问题,本文深入分析了人脑高效认知目标的
学位
[目的]分析慢性鼻窦炎患者的变应原谱、血清总IgE和血清特异性IgE的特点,探讨变态反应在慢性鼻窦炎中的作用机制。[方法]收集2016年7月-2018年10月期间收入本院耳鼻咽喉头颈外科的变应原检测阳性的慢性鼻窦炎患者160例,根据《慢性鼻-鼻窦炎诊断和治疗指南(2012)》分为79例慢性鼻窦炎伴鼻息肉组(CRSwNP组)和81例慢性鼻窦炎不伴鼻息肉组(CRSsNP组),同期91例变应原检测阳性的
学位
高光谱图像相比于自然图像具有更加丰富的空间信息和光谱信息,能够用于对地物目标进行更准确的识别,近年来得到了越来越广泛的研究和应用。高光谱图像数据丰富,但是标记样本难以获取,因而应用更少的标记样本得到更高的分类精度是重要的研究方向。随着深度学习技术的发展,许多基于神经网络的高光谱图像分类方法取得了很好的分类效果。但是这些分类方法大多从邻域块内提取特征信息,忽视了地物目标在空间上更大区域内的匀质性。图
学位
随着高光谱遥感成像技术的不断发展,高光谱图像在现实世界中的应用已经成为遥感领域中的重点研究方向并受到越来越多学者们的关注。区别于自然图像和多光谱图像,高光谱图像具有更多的光谱波段和更多的光谱信息,便于研究者对地物目标进行更好的分类。深度学习方法可以有效提取高光谱数据中的光谱-空间信息,已经在高光谱图像分类任务中取得了很好的效果。但是,现实世界中的高光谱数据集往往是开放集,即由于时间成本和人力成本等
学位
视觉目标跟踪是计算机视觉中一个基础而又具有挑战性的研究课题,应用场景越来越广泛,主要包括视频监控、人机交互、自动驾驶以及军事制导等。视觉目标跟踪的主要任务是,给定视频第一帧图像中待跟踪目标的位置,通过跟踪器推断出该目标在后续帧图像中的位置。近年来,越来越多的研究人员致力于基于深度神经网络的视觉目标跟踪研究,跟踪的性能也在不断地被优化,但是由于存在背景相似干扰、目标形变、光照变化、尺度变化、运动模糊
学位