基于多尺度信息融合的视觉SLAM室内语义静态地图构建研究

来源 :贵州大学 | 被引量 : 0次 | 上传用户:LittleE1032
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
许多智能设备如机器人、智能工业车的出现改变了生活方式,解放了生产力,其中同时定位与建图(Simultaneous Localization and Mapping,SLAM)系统扮演着不可或缺的角色,常被用以估计位姿和构建环境一致性地图,在家居及工厂生产环境中得到广泛应用。但是随着新的生产、生活需求的出现,要求智能设备具有对周边环境的感知和理解能力,辅助智能设备完成诸如导航避障、人机交互、物体操纵等行为级任务,因此构建具有可感知理解信息的环境地图对智能设备而言就变得十分重要。本文以家居护理机器人视觉系统为研究背景,目标是在室内动态场景下,通过动态物体剔除与图像多尺度信息融合的方式对现有的ORB-SLAM3框架做出一定的改进和创新,构建出可供机器人上层交互应用与下层运动控制使用的静态语义地图和八叉树语义地图。主要研究内容和工作成果如下:(1)针对视觉SLAM在动态场景下,由于物体运动导致特征点数据误关联,无法准确估计位姿的问题,提出了一种将实例分割网络获取的语义信息和全局稠密光流进行相互约束,生成动静掩膜来剔除动态特征点的算法,改善了ORBSLAM3在动态场景下的鲁棒性和追踪精度。(2)以图像融合的方式,将图像不同尺度的信息进行融合,改善环境地图的表征效果。提出了一种利用小波多级变换对图像进行多尺度信息融合的算法:在子带融合过程中低频子带融合直接使用一级分解得到的低频轮廓近似子带,高频子带融合规则对比选择了基于梯度特征的方法,再将各子带构建的残差金字塔参与最终的融合过程经去模糊后,形成有效的图像多尺度信息融合方案,在赋予地图可感知理解信息的同时改善地图表征质量。(3)在动态物体剔除和图像多尺度信息融合的基础上,将图像多尺度信息融合后的二维语义信息与ORB-SLAM3产生的关键帧位姿信息相结合,构建室内静态语义地图和八叉树语义地图,拓展ORB-SLAM3语义稠密建图功能。经数据集实验对比验证和系统运行测试证实了所构建系统的有效性和可行性,为家居护理机器人的上层交互应用与下层运动控制提供助力。
其他文献
报纸
在超超临界循环流化床锅炉(CFBB)燃烧过程中,温度信息不仅可以反映燃烧过程的细节,还可以反映锅炉的运行状态,这对安全、高效的锅炉运行具有重要意义。锅炉实际运行中炉膛温度信息的获取方法众多,如热电偶测量、声学测量、光学测量等,但这些方法都有其局限性。热电偶只能单点测量,由于成本和条件的限制,很难获取炉膛温度场;声学测量和光学测量,可获得炉膛温度场,但存在许多问题,限制了它们的使用,所以利用数值方法
学位
光谱成像技术可以得到物体的二维空间信息和一维光谱信息,空间信息可以确定物体的形状、尺寸等外在特征,光谱信息可分析物体的成分、含量等内在特征,光谱成像技术的图谱特点使其在许多领域均有着广泛的应用。传统的光谱成像多需要扫描方式来得到空间和光谱的三维数据,数据采集时间长,且硬件系统通常有扫描移动部件。作为一种新型的光谱成像实现方式,快照式光谱成像仅通过一次曝光采集一张图片,结合重建算法便可获取物体的二维
学位
易开采、储量大且高挥发分含量的低阶煤是煤气化技术的理想原材料。但是过高的含水量不仅会使低阶煤在气化时生成大量的废水,还会损耗气化设备的使用寿命。因此,低阶煤在气化前都要经过脱水干燥处理。水热脱水技术可在实现较高脱水率的同时,有效抑制低阶煤在干燥后的重吸附现象。然而,目前对水热脱水技术的研究多以宏观实验为主,无法从微观层次解析水热脱水的作用机理等问题。本文首先以某褐煤为研究对象展开水热脱水实验,探究
学位
化石燃料的大量消耗造成了各种各样的环境问题,因此可再生能源和分布式电源发电成为了目前与储能系统齐头并进的重要研究课题。在各种可再生能源中,太阳能因其具有普遍、数量巨大、清洁安全以及利用方便等优点,得到了广泛的应用。光伏发电系统作为将太阳能直接转化为电能的装置,需要对其能量转化效率进一步地提高,因而光伏发电系统的建模以及优化过程显得尤为必要。本文针对光伏系统建模过程中的光伏电池的参数辨识问题以及最大
学位
随着对宇宙观测与探索的深入,人类基于对宇宙的未知开始筹建下一代超级射电望远镜SKA用以解决一个个宏伟的科学目标。目前在建的SKA1-low即将开始巡天并进入第一科学目标——宇宙黎明和再电离探测的研究。但是低频SKA成像时所带来的带宽涂污效应使得再电离时期各观测信号扭曲,致使后续无法完成更加精确的信号分离等工作,而传统天文的宽带干涉仪成像算法面对海量数据又无法完成精准批量的效应矫正。近年来深度学习在
学位
自然语言处理是计算机科学领域与人工智能领域中的一个重要方向,情感分析又是自然处理领域的重要分支和关键任务,被广泛应用于社交媒体、问答服务和舆情分析中,它协助人们解决了各种难题,成为了目前研究的热点方向。但是该研究面临着文本内容灵活、表达方式多样和语句歧义等难点,同时传统的情感分析方法需进行词典构建和数据标注,费时费力的同时还极度依赖领域语言知识,大大阻碍了情感分析的进一步发展。预训练语言模型可在极
学位
钠超离子导体(Sodium superionic conductor,NASICON)结构的材料以其具有Na+快速扩散的通道而闻名,NASICON结构的典型材料Na3V2(PO4)3在理论上具有高离子电导率和低电子电导率。Na3V2(PO4)3材料由于其在空气中良好的热稳定、安全性高和成本低廉等特点,让该材料成为固态电解质材料的候选材料之一。良好的固态电解质需要材料有极高的纯度,才能避免由杂质引起
学位
钛及钛合金具有密度低、耐腐蚀以及耐高温等优异性能,被广泛应用于航空、生物、储氢、核工程等重要领域,然而,钛对氢具有较强的亲和力,容易发生氢脆现象。钛中氢的不同存在方式对钛的损伤程度不同,即氢与钛中微观缺陷不同的相互作用对钛的氢损伤行为不同。因此揭示不同氢环境条件下钛中氢的存在形式、氢与缺陷的相互作用机制将为钛合金在含氢特殊环境中的使用服役提供重要的理论依据和基础。本文选用Ti-Mo合金作为主要研究
学位
当下,无线电通信技术蓬勃发展。具有低损耗、低成本、高增益和超带宽性能的天线对于现代通信系统是非常有应用价值。结合抛物面反射天线的高增益和印刷微带天线低制造成本、灵活结构的优点,反射阵列天线得到了广泛的应用,在通信领域中有着举足轻重的地位。然而,它也存在一些局限性,主要是由于微带天线单元的窄带特性以及工作频率变化对空间相位延迟的影响,限制了反射阵列天线的带宽。还有平面微带天线不能进行灵活地波束动态扫
学位