基于多分辨率级联网络的实时语义SLAM建图

来源 :南京大学 | 被引量 : 0次 | 上传用户:music5700
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在目前的科技发展浪潮中,人工智能技术的普遍应用已经成为各领域前沿技术发展的重要趋势,特别是机器人领域的发展受到极大关注。同时定位与建图(Simultaneous Localization and Mapping,SLAM)研究机器人的定位、导航和路径规划等问题,在SLAM系统中添加语义是提升机器人人机交互能力的重要途径。本文提出一种基于多分辨率级联网络的语义SLAM建图模块,提出一个针对RGB-D输入的多分辨率级联网络来实现平衡精度与速度的图像语义分割。本文所提出的多分辨率级联网络是针对RGB-D多维输入的情况,包含了三个分辨率情况下的图像输入,利用深度近似卷积以低成本的运算代价和内存消耗融合深度图像信息,以中分辨率经过浅层特征提取层得到的特征图作为低分辨率分支进行进一步特征提取,三个分辨率分支的特征使得网络对全局语义信息和局部细节信息具有良好的提取能力。利用多分辨率特征进行融合并利用标签进行监督训练,并在预测过程达到实时效率。本文提出的以多分辨率级联网络为基础的SLAM语义建图模块能够以实时效率针对RGB-D输入获取分割结果预测图,在SLAM的视觉里程计模块沿用目前已有的基于RGB-D的SLAM系统框架,在建图模块引入多分辨率级联网络提高效率,增强建图的稠密度。本文在NYUv2和SUN RGB-D数据集对多分辨率级联网络进行图像语义分割任务的测试和验证,并与其他优秀算法进行比较,本文所提出的网络结构对精度和运行速度两方面更具平衡性。同时本文在NYUv2数据集提供的视频数据上对提出的SLAM语义建图模块进行了实现,达成了稠密的语义建图。
其他文献
图像超分辨率重建算法从低分辨率图像重建高分辨率图像,可以在不升级成像系统的前提下获取更高质量信号。注意力机制模拟人眼视觉系统对观察物体的关注,超分辨率网络结合注意
近年来随着科技的飞速发展,电力电子装置在日常生活中随处可见,给工业及人们生活带来极大便利的同时,产生的谐波和无功电流也给电网电能质量带来了很大挑战。有源电力滤波器(
塔架式双管自立钢烟囱作为--种新型自立钢烟囱,近年来在国内外工程特别是电力系统中的应用越来越广泛。风荷载和地震作用是其工程结构失效的主要因素,在工程结构的防风抗震设
手语识别是计算机视觉领域的一个重要的研究方向,是融合了图像处理、模式识别及机器翻译等多学科的研究课题。手语识别的社会现实意义使得越来越多的研究者致力于开发出有效
作为非经营性的基础设施项目,政府与社会资本合作(Public-Private-Partnership,PPP)模式为市政道路项目的融资问题带来了解决方案。但由于政府和社会资本方对项目存在不同的
垮掉派边缘作家理查德·布劳提根(Richard Gray Brautigan,1935-1984),是二世纪六、七十年代美国杰出的诗人和小说家。与垮掉派其他小说家相比,布劳提根的女性书写显得别具一格。他是个自相矛盾的写作者,他的价值观左右摇摆,彼此相抵触。在小说作品中,布劳提根笔下的女性人物既有家庭特质,又呈现出社会性;她们既被塑造为男性凝视中的女性客体,又呈现出女性身体主权意识。布劳提根以矛盾的
近年来,网络中存在各种各样的流量,每种流量对于网络的性能都有着不同的要求,有的对时延要求很高,有的对吞吐量要求很高,甚至有的对时延和吞吐量都有着很高的要求。如何保证
土壤养分的研究一直是森林工作者以及农业研究人员工作的重中之重。该研究针对山西西部吉县蔡家川流域水土保持林区土壤有机碳和全氮含量开展空间分异规律分析。综合经典统计学数理统计、地统计学软件、空间地理信息系统软件,分别对研究区域内土壤有机碳(SOC)和全氮(TN)两种属性值进行分析并计算土壤有机碳和全氮储量。经典理论学数理统计分析结果表明,海拔、坡度对土壤有机碳和全氮含量有显著影响,呈现正相关关系;树种
传能光纤和远端模块作为高压换流站光测量系统主要的两个关键组件,由于受外界各环境因素的影响,导致二者故障率较高,从而引起整个系统运行的异常和风险。但目前在该领域内对
  本文从了解MT-2型缓冲器的组成结构、作用原理、常见损伤入手,依据相关的检修标准和技术要求,叙述了MT-2型缓冲器的检修工艺过程。目的为了抛砖引玉,与行业内的专家相互切磋