基于视觉SLAM的室内语义地图构建

来源 :浙江大学 | 被引量 : 0次 | 上传用户:likemagicliyong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科学技术的发展和生活水平的提高,机器人逐渐进入到人们的日常生活。但是目前的家居服务机器人通常是基于同时定位地图构建(Simultaneous Localization and Mapping,SLAM)技术来构建包含几何信息的稀疏路标地图,仅仅能够用于执行导航定位任务。这种情况下,机器人无法理解环境中物品高层语义信息,就难以执行人所下达的包含高层语义信息的命令。在这种需求下,将SLAM和物体检测识别技术结合起来,构建包含物体语义信息的语义地图成为了一个行之有效的解决方案。本文针对室内语义地图的构建,首先研究了物体级的语义地图构建。基于YOLACT(You Only Look At CoefficienTs)网络对图像进行实例分割,并提出了一种结合深度信息的自适应区域增长算法对实例分割进行优化,得到更加准确的三维实例分割,实现了单帧图像的语义标注。针对地图的物体实例,采用YOLACT提取的语义特征和LAB空间的颜色特征对物体实例外观进行特征编码,通过结合外观一致性和空间一致性的方法对地图中的物体进行实例匹配,实现了物体库中的物体构建和物体更新。最后基于八叉树数据结构,构建了包含物体实例信息的语义地图。针对实际环境中更多是包含动态目标的动态场景的情况,本文也研究了面向动态环境的语义地图构建。对于环境中的动态目标,本文提出一种基于光流和先验知识的动态目标检测算法,采用FlowNet2.0网络对光流场进行预测,结合YOLACT语义识别的结果来融合物体动态属性的先验知识来对动态物体进行判定。本文在ORB-SLAM2的基础上进行了改进,通过动态特征点的剔除,提高了动态环境下定位精度,从而提升了语义地图在动态环境下的构建效果。基于机器人操作系统(Robot Operating System,ROS)平台,本文对物体级的语义地图构建和面向动态环境的语义地图的构建都进行了实验。本文针对物体级的语义地图构建和面向动态环境的语义地图构建,都在公开数据集以及实验室所搭建的模拟室内家居环境的实际场景进行了实验验证。实验表明,本文所提出的物体级的语义地图构建算法能够对环境中的物体实例进行识别、匹配,从而能够在语义地图中维护物体实例信息;而本文所提出的面向动态环境的语义地图则能够在动态环境下准确定位,提升了动态环境下的语义地图构建效果,验证了本文算法的可行性和鲁棒性。
其他文献
本文利用Fluent软件对凹坑表面的空气流动情况进行了二维数值模拟计算,分析了不同速度下凹坑间距对减阻效果的影响。研究结果表明,当来流速度为30m/s、凹坑间距为5mm时,减阻
针对准噶尔盆地南缘齐古断褶带复杂构造情况,开展了齐古断褶带构造演化研究。在广泛调研天山山体演化、周边地层发育、地表水流变更、地震解释剖面的基础上,以理论地质学为指
为进一步提高淀粉液化芽孢杆菌(Bacillus amyloliquefaciens)BS 5582产蛋白酶的水平,对发酵工艺进行优化,采用了分阶段控温工艺。发现在5L发酵罐装料系数0.6、接种量6.67%、种龄18h
<正>第一章电力行业第六节轴流式风机的调速控制和节能计算1前言在火力发电厂中,风机和水泵也是最主要的耗电辅机设备,且容量大、耗电多。加上这些设备都是长期连续运行和常
期刊
探讨有效医患沟通的方式,建立医患之间相互信任、相互了解的关系,从而减少医疗纠纷的发生.探讨医患关系紧张原因,探索语言沟通的技巧.希望通过有效沟通,帮助病人了解、认识、
高中函数知识有着重要的地位.但高中函数教与学的情况并不理想.为了改进当前高中函数教学现状,对高中函数教学研究很有必要.考虑到学生对高一函数内容的掌握情况基本决定了他们对高中函数知识的建构程度及对高中函数思想方法的认知程度,因此本文主要探讨了如何有效地实施高一函数教学.此外,为了更加明确高一函数的重点内容,而高考试题中考察到的函数知识一定程度上是高一函数教学重点的指挥棒之一,因此本文基于高考试题进行
通过四县区核桃产业发展历程分析比较,吸收经验,提出县级发展核桃产业应合理定位、规划格局、强化机制、规范管理、基地辐射等建议,促进林产业可持续发展。
期刊
草编,是中国民间生活沿袭并不断发展的一项古老、传统的手工艺。在民间,一直流传着“编筐打篓,养活九口”的俗语,这不仅是中国劳动人民朴实生活的写照,更进一步反映了草编技艺的成熟发展和实用性价值。在科技高速发展的今天,我们在忧虑草编技艺如何传承下去的同时,忽略了草编蕴含的深厚的民族文化,它见证了我国农业文明的发展和时代文明的变迁,具有鲜明的时代文化特征。本论文通过田野考察的方式,亲身参与草编编结,参观长
本论文概述了影响制动踏板行程的因数,分析踏板力与踏板行程、制动减速度的关系以及制动感觉的评价指标.根据影响踏板行程大小的因数,间接推导踏板力与踏板行程的关系,通过理论
龙女寺构造须家河组天然气藏为较典型的岩性油气藏,其圈闭闭合高度低、储层致密、气水分布关系复杂。分析了须家河组气藏的烃源岩、储集岩、盖层和圈闭条件,认为其成藏条件优越