基于深度卷积神经网络的室内环境语义地图构建

来源 :东北大学 | 被引量 : 0次 | 上传用户:lyzyk413026
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
SLAM(同步定位与构图,Simultaneous localization and mapping)是移动机器人自主执行任务的关键环节。传统的SLAM方法构建的环境地图仅能区分障碍和可通行区域,并不包含物体类别信息。基于深度学习的感知算法能够对图像进行理解,将两者进行结合是当前研究的热点。本文利用深度神经网络在场景识别方面的优势,与SLAM技术的自主定位优势相结合,研究基于深度学习的环境语义地图构建算法,具有很强的理论和现实意义。针对输入的图像序列,本文利用ORB-SLAM进行关键帧筛选与关键帧间的位姿估计。为减少冗余的时间耗费,仅在关键帧上进行二维图像的语义分割。在位姿估计中利用多种定位模型,将得到的位姿进行局部和全局优化,从而提高定位的精确度和稳定性。针对二维图像序列的语义分割,本文提出了基于Deeplab算法的改进算法。针对上采样或者反池化的不可学习特性,提出卷积上采样网络将特征映射到更高的维度,再转换到合适尺寸,从而完成特征尺寸的变换过程。针对场景内任意比例出现的物体重建的情况,本文提出将深度值作为门控信号(如无法直接获得深度图像,可以利用神经网络对深度进行预测),控制空洞卷积的空洞比例大小,使得算法对较远处的物体能够保留小细节,对近处的物体能够保持较大的视野。具体的做法为:将深度离散化为五个等级,对远处的物体使用较小的步幅,近处的物体使用较大的步幅。另外,本文通过分析发现:虽然神经网络估计的深度可能不够准确,但是由于其平滑性,对分割的改进效果并没有负面影响。在理论研究的基础上,本文针对室内场景与室外场景公开数据集上进行了验证。实验结果表明,本文提出算法针对各数据集的大多数类别的物体均有整体的提升。为构建可用于导航任务的环境三维语义地图,本文研究基于简单线性迭代聚类(SLIC)算法的超像素分割算法,在地图的优化过程中作为条件随机场中高阶势能约束项。三维地图的构建过程包括:对齐彩色图像与深度图,利用相邻关键帧间的空间对应关系,将像素点反投影到三维空间,构建三维稠密点云地图与OctoMap地图。在形成三维语义地图的过程中,本文将图像语义分割信息和超像素分割信息以贝叶斯更新的形式融合到稠密占据地图中,利用高阶条件随机场对融合后的语义地图进行优化:不仅考虑每个网格内被分配的类别,还考虑超像素块内的类别约束,形成了三维的语义OctoMap地图,节省内存空间的同时满足后续机器人导航任务需求。最后,对本课题的研究工作进行了总结,并对未来的研究方向进行展望。
其他文献
连铸坯热送热装技术具有降低能源消耗,简化工艺流程,提高金属收得率等特点,为钢铁企业带来诸多经济效益。但含Nb等微合金钢连铸坯采用热送热装技术时,常常会造成轧材表面裂纹率大大增加。铸坯表面淬火技术能够改变铸坯表层组织的热履历,有效解决含Nb等微合金钢连铸坯热送裂纹问题。但是连铸坯表面淬火技术的一些具体工艺参数,如淬火开始温度、淬火速度等,以及淬火过程中铸坯温度变化情况,仍需要进一步的研究。本文以国内
近年来,核电设备、涡轮叶片等关键部件的安全可靠性引起学者的极大关注。相比于标准力学性能实验,小微试样实验技术可以有效地避免对在役构件造成严重破坏,在材料性能研究中得到了越来越多的重视。悬臂梁弯曲疲劳实验与小冲杆蠕变实验因其试样尺寸微小而适用于对在役设备以及关键结构部件的疲劳性能和高温蠕变性能预测,而且结果与常规疲劳和蠕变实验近似,已逐步被应用于核电、航空航天等领域。本论文工作选择316不锈钢和In
液晶弹性体材料是基于传统的弹性体和高分子材料进行分子设计、引入液晶相态并构造热力学稳态的新一代高分子材料。液晶弹性体材料兼具液晶的各向异性和高分子网络的橡胶弹性,与非交联液晶高分子相比,液晶弹性体具有独特的软弹性。而手性液晶弹性体因其具有螺旋结构赋予了其更多优异的性能。手性液晶弹性体不仅具有一般弹性体优良的机械性能、热和化学稳定性,还具有因手性带来的铁电性、压电性等,使其在显示、压电、非线性光学、
碳纤维增强碳化硅陶瓷基复合材料(Cf/SiC)具有高硬度、耐磨性、低密度、高强度等卓越性能。作为一种新型的高温材料,Cf/SiC材料已经被广泛应用于航空航天、交通等领域。但是Cf/SiC材料加工技术研究目前仍处于初级阶段,Cf/SiC材料加工质量难以保证,严重阻碍了其使用和发展。Cf/SiC材料具有各向异性的特点,基体和纤维具有不同的强度和刚度,存在强度较弱的界面层,在受力时易出现界面脱粘。传统的
数控机床进给系统的性能一方面取决于各个零部件的制造精度,另一方面也依赖各个部件间的装配精度。导轨作为构成进给系统的关键零部件之一,其制造安装精度是确保进给系统中各主要零部件间相对装配精度以及运动精度的基础,会最直接的影响到工作台的运动姿态,进而成为影响工件的形状误差和位置误差的主要因素之一。导轨副作为影响工作台最直接的因素之一,当前缺乏完整而系统的方法评估导轨误差对工作台运动误差的影响作用,因此,
当下,随着工业生产水平的不断提升,模具作为最基础的工业生产装备,其自身高性能要求或恶劣的工作环境,使得模具的表面改性及失效修复具有越来越高的实际应用价值。激光熔化沉积技术是近年来迅速发展起来的一种可用于模具的表面改性与失效修复的新型增材制造技术,并且在其沉积质量影响因素(激光功率、扫描速度等)方面已经进行了很多的研究,但是待沉积基体自身因素对沉积层质量的影响规律很少有人去关注。而基体表面形貌会影响
钾储量丰富,氧化还原电势低(K/K+,-2.93 V),而且在电解液中K+具有相对较低的路易斯酸度,这些优点使得钾离子电池在成本、寿命、功率和能量密度等方面展现出突出优势,使其成为大规模储能电源的理想选择之一。然而,K+半径和质量较大,在电极材料中扩散速率缓慢,这给储钾电极材料的开发利用带来巨大的挑战。碳材料价格低廉且环境友好,可与钾形成KC8化合物;金属锑能够与钾发生多电子合金化反应形成K3Sb
人工表面等离子体激元(Spoof Surface Plasmon Polaritons,spoof SPPs)是光频段表面等离子体激元(Surface Plasmon Polaritons,SPPs)在微波与太赫兹波频段的拓展,SpoofSPPs结构具有色散特性以及约束电磁场能力易受结构参数调整的优点,被广泛应用于微波频段无源器件。本文对结构尺寸小、易于加工、集成的二维平面spoof SPPs结构
转子结构作为机械产品当中最为常见的一种结构,广泛存在于各种动力机械以及化工机械当中。随着转子系统的不断运行,转子系统出现故障的概率也进一步增大,如何对转子故障进行诊断就成为了一项非常重要的研究内容。故障的发生常常表现为系统非线性的进一步增强。因此,通过对转子系统的非线性特征进行实时定量的检测,我们就大概可以知道故障的严重程度以及发生位置,从而为下一步的检修做好充分准备。因此,对转子系统的非线性特征
语音作为人类日常生活中最重要的交流方式之一,蕴含着丰富的情感信息。为了使人与机器的交互能够更加自然与智能,越来越多的学者开始关注与研究语音情感识别的相关内容。虽然在近几十年中,对语音情感识别的研究取得了很大的进步,但是在现有的语音情感识别系统中,仍然缺少能够准确识别语音情感信息的情感特征。因此,对语音情感特征提取技术的研究,仍是目前研究的重点,提取更加具有代表性的语音情感特征,提升语音情感系统的识