基于视觉SLAM室内环境语义地图构建研究

来源 :西安建筑科技大学 | 被引量 : 0次 | 上传用户:viclee0716
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着移动机器人在众多领域发挥重大作用,日渐复杂任务对机器人智能化水平提出更高要求,移动机器人智能化一个核心表现在于对未知环境探索与感知。利用视觉SLAM技术,可以精确估计机器人移动轨迹与位置,并准确构建环境地图,完成移动机器人对外部环境几何信息和拓扑信息表征,而缺乏对于外部环境语义信息获取,限制机器人对外部环境语义感知能力。因此,本课题在视觉SLAM研究基础上,结合视觉SLAM算法与基于深度卷积神经网络的图像语义分割模型,实现包含语义信息的三维稠密语义地图构建,增强移动机器人对所处环境语义信息感知,使机器人完成更复杂任务成为可能。文章主要工作包含以下三个方面:(1)针对本文实验环境,采用RGB-D相机为传感器,文章分别实现了以面片模型为基础进行三维稠密地图构建的Elastic Fusion算法和ORB-SLAM2算法完成基于点云模型地图构建,完成移动机器人对外部环境几何信息表征。实验结果表明,构建以面片模型为基础的三维稠密地图对比点云模型在大尺度场景效果更好。(2)针对移动机器人语义信息感知需求,采用Deeplab V3+语义分割模型,实现移动机器人对外部场景语义信息获取。对包含大量参数的Deeplab V3+模型难以满足实时性问题,设计了轻量级Deeplab V3+语义分割模型,实现分割精度与速率平衡,保障网络分割模型结合视觉SLAM系统后,满足三维语义地图构建实时性要求。实验结果表明,改进后Deeplab V3+在Pascal Voc2012数据集上对比原模型,维持分割精度同时大大提高分割速率。(3)基于视觉SLAM与图像语义分割模型,设计了语义地图构建方法。首先针对基于联合双边滤波算法(Joint Bilateral Filer,JBF)进行输入深度图像预处理效率较低问题,提出了基于阈值处理的JBF算法,优化深度图像处理速度。最后基于贝叶斯更新方法,融合Elastic Fusion算法与改进后Deeplab V3+模型,将轻量级Deeplab V3+网络对二维RGB图像分割后获得的语义信息动态融合进三维稠密地图中,完成语义标注的三维地图构建,实现视觉SLAM系统构建的三维稠密地图中所属物体包含物体类别等语义信息。在NYU V2数据集上进行实验验证,结果表明,本文方法可实现精确快速三维稠密语义地图构建。
其他文献
我国西北偏远及落后乡村建筑传统的供能方式污染环境,寻求新的清洁供能方式是降低建筑能耗、提高居住质量的有效途径。基于西北地区太阳能、空气热能等可再生能源较为丰富的现状,可以采用太阳能、空气热能等多种能源互补出力的多能互补系统满足西北乡村建筑用能需求,但由于可再生能源的间歇性、波动性,供需匹配难度大。储能设备的集成是现阶段实现可再生能源系统供需平衡的重要技术,但单纯依靠储能的调节作用会极大增加系统成本
近年来,城市化与城市机动化的快速发展限制了儿童通学方式和儿童通学过程中的行为活动,安全视角下的通学路径景观能够在保障儿童生命安全的情况下,满足儿童独立出行需求,锻炼儿童的独立能力,增加儿童户外活动和社交的机会,促进儿童身心健康发展的同时能够对儿童友好型城市建设发展起到积极作用。本文以通学儿童为研究对象,从儿童安全的视角,研究通学路径景观设计。首先,对通学儿童安全以及通学路径景观相关概念与研究进行总
历史文化街区是城市历史延续的印记,是城市历史文化和精神内涵的传承与发展。近年来,历史文化街区的保护越来越受到人们重视,而火灾是威胁历史文化街区安全的重要灾害之一。随着韧性城市和韧性社区建设的全球化发展,历史文化街区的韧性建设也备受关注,建设具有消防安全韧性的历史文化街区对于完善历史文化街区的韧性体系有着重要意义。本文从消防安全的角度出发,以历史文化街区为研究对象,以提高街区系统整体火灾承载能力和提
近年来,为了满足室内良好的视野和采光需求,城市中不仅仅是采用玻璃幕墙设计的高楼大厦越来越多,许多居民住宅楼外立面所使用的玻璃面积也越来越大。落地窗等大面积采用玻璃的设计无疑会为房间带来更好的光照同时视野更加宽阔。然而随着玻璃使用时间的延长,灰尘、雨渍等污渍会不可避免的影响玻璃自身的美观程度以及透光性,因此需要对玻璃表面定期进行清洁。目前主要的清洁方式依然是效率相对低下,危险性较高的人工清洁方式,为
改革开放推动下,我国经济呈现快速发展趋势,人均收入大幅增长,旅游成为人们休闲娱乐的重要途径。根据文化和旅游部公布的数据显示,在2016年到2018年期间,我国就已经实现了从旅游短缺型国家到旅游大国的历史性跨越,构建了以大众旅游为核心,国内外旅游协调发展的新格局。近年我国旅游行业对于国民经济发展的支撑作用日益明显并保持了稳定的增长趋势。但是随着社会的不断发展以及传统工业的衰退,城市中传统工业大量外迁
自动化立体仓库作为企业生产运输的枢纽,集成了运输、存储、分发等多种功能,已成为制造企业不可缺少的一部分。但随着企业生产规模的扩大和运输速率的提高,单出/入台布局模式下的自动化立体仓库已不再满足需求,因此,本文以双向式立体仓库为对象,研究其货位分配和堆垛机调度优化策略,提高仓库货位的利用率,缩短堆垛机存/取货物的运行时间。针对双向式自动化立体仓库货位分配问题,建立以产品出入库效率、货架重心以及产品聚
配气机构作为发动机系统的重要机构,负责气门的启闭,是保证汽车发动机工作过程中及时换气的结构装置。凸轮机构作为其重要组成构件,往往由于动力学参数选择不合适,导致机构性能下降,严重时引起配气系统运行异常甚至失效,从而带来安全风险。因此,为了保证系统运行中配气机构的气门按时打开关闭,研究动力学参数对气门动态特性的影响十分必要。本文主要分析了配气凸轮机构动力学参数对气门启闭段短摇臂端输出位移与凸轮升降程误
网壳作为一种典型的空间结构形式,以其独特的结构特性在大跨度结构中应用广泛。近些年来,在传统钢网壳的基础上又诞生了铝合金网壳,本文以此为研究背景,通过对近万例K6型铝合金网壳算例进行模拟分析,着重研究了矩形管截面铝合金网壳的非线性屈曲行为,并针对结构中可能存在的随机初始缺陷问题进行了讨论,对随机缺陷的影响进行了量化说明,文末基于神经网络提出了一种针对带缺陷网壳承载力预测的网络模型。本文主要研究内容与
在营建机动化主导的交通发展模式下,街道的交通功能随之得到快速发展。然而,城市肌理也因大尺度建被撕裂,传统街巷尺度自根本上因营建机动化城市而被改变,城市街道的可步行性也因以来交通机动化与快速城市化的过度发展而逐步被削弱,市民日常生活以及城市宜居性因此深受影响。如何令街道可步行性得到提升以及街道步行空间品质得到重塑已显得尤为重要。本文选取城市生活性街道为研究对象,以街道可步行性为切入点,通过整理文献,
随着机动化的迅速发展,以慢行交通为主的历史街区难以负荷大量的交通需求,快慢行交通系统的服务水平普遍较低,且受风貌保护影响街区不易通过增加交通供给解决交通问题,导致居民日常出行感受及品质不佳。因此本文为重视人们精神需求,将历史街区出行者的幸福感引入交通方式选择模型中,分析出行行为选择机理并为优化历史街区交通空间及交通组织与管理提供理论依据。本文首先以出行特性、个人社会经济属性、出行幸福感包括认知评判