复杂环境下的单目视觉语义SLAM问题研究

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:ldkkkkk54
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
传统的视觉SLAM依据点、线、面等几何特征可以进行有效的位姿估计并建立环境地图,但是这种地图并不包含环境中高层次的语义信息。为了使得机器人更好地理解周围环境、更合理地完成自主导航以及执行更高级的人机交互任务,本文构建了具有尺度感知的单目视觉语义SLAM系统。首先,从针孔相机模型、双目相机模型、特征匹配、对极几何约束、三角测量以及PnP位姿求解等几个方面介绍了视觉SLAM前端相关的理论基础。然后对卷积神经网络的网络结构、损失函数以及正则化方法进行了全面地介绍,为后续实现基于卷积神经网络的单目视觉语义SLAM系统提供理论指导。其次,为解决单目视觉SLAM的尺度不确定问题,提出了将传统的单目视觉SLAM与基于卷积神经网络的单目图像深度估计算法相结合,构建具有尺度感知的单目视觉SLAM系统,从而显著提高位姿估计精度以及在纯旋转运动中单目视觉SLAM的鲁棒性。最后,在解决了单目视觉SLAM尺度不确定问题的基础上,构建了基于卷积神经网络的单目视觉语义SLAM系统。在ROS环境下对基于卷积神经网络的图像语义分割算法进行封装实现,并对单目ORB-SLAM所建稀疏地图进行稠密化,最后将语义分割之后的图像投影到点云地图中完成语义地图的建立。为了验证具有尺度感知的单目视觉语义SLAM算法的有效性,本文在KITTI数据集上进行了一系列实验,并对实验结果进行了定性和定量分析。实验结果表明,本文所提出的单目视觉语义SLAM系统有效地提升了机器人复杂环境建模和理解能力。
其他文献
[目的/意义]随着城市大数据规模和类型特征日益复杂与丰富,智慧城市建设的关键不再是基础信息设施,而是面向城市多源数据的融合及应用服务。[方法/过程]文章以城市物理、社会
目的考察羚贝止咳糖浆对豚鼠离体气管螺旋条平滑肌收缩的抑制作用,并探讨其作用机制。方法制备豚鼠离体气管平滑肌螺旋条,随机分为羚贝止咳糖浆组、川贝雪梨糖浆组和异丙肾上
目的叙事医学是近年来较热门的医学理念,益生菌可以影响睡眠。本研究探索叙事医学联合益生菌干预对炎症性肠病性关节炎(inflammatory bowel disease arthritis,IBDA)患者睡眠
社会责任有着丰富的内涵与外延,是衡量新时代青年综合素养的重要标志。加强新时代青年社会责任培养既是承接青年运动主题的历史需要,也是培养时代新人的现实要求。新时代青年
上海,兴业路76号;浙江嘉兴,南湖红船。两个具有重要标志意义的中国革命原点,在时隔百年的大地上依然闪耀着指引未来的光芒。2017年10月31日,在党的十九大胜利闭幕后,习近平总
建设社会主义的本质要求在于实现人的全面发展。改革开放35年间,邓小平、江泽民、胡锦涛三代核心领导人的发展观念随着时代背景、物质条件的变化而变化,其中蕴含的有关“人”
随着智能移动机器人在人们生活中的广泛应用,机器人的自主导航能力不断提高。而实现机器人自主导航的关键技术就是同时定位与地图创建,即SLAM技术。以微软研发的Kinect为代表
基础科学研究是创新的源泉,是科技竞争力的源泉。中国基础研究从投入规模和结构上都与创新领先国家有很大差距,企业对基础研究的投入不足、重视不够是一直存在的短板。首先从
一战期间,北洋政府内部就参战与中立展开争论,经过北洋政府权衡利弊,并在社会名流的积极推动下,最终决定采取“以工代战”的方式加入协约国一方作战。经北洋政府默许,英法成立招工公司在中国华北地区先后招募了约十四万华工赴法参战。本文以十四万赴法华工为研究对象,以华工赴法的背景动机、华工在法工作状况、华工所接受的教育以及赴法华工爱国意识的觉醒及社会影响为出发点,全面细致地分析一战赴法华工的悲惨经历及社会贡献
随着我国船舶排放控制区(SECA)建设从沿海向内河的推进,基于无人机和嗅探法的船舶燃油硫含量检测问题成为行业研究热点.基于移动目标旅行商理论(MTTSP),结合检测过程特点,提