基于深度学习的移动机器人室内导航技术的研究及实现

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:liguang1233000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
室内移动机器人自主导航问题一直是机器人领域的研究热点。大多数移动机器人的自主导航方法,需要对机器人所处环境进行表征。在早期的研究中,研究者们通常用精确度量地图对机器人所处环境进行表征,机器人根据精确度量地图进行自主导航。然而,精确度量地图的采集与制作既费时又费力。此外,基于精确度量地图的自主导航方法通常难以迁移到新的环境中,对于每个新的环境都要进行新一轮的信息采集和地图制作。为了解决这个问题,研究者们尝试用更加抽象的方式对机器人所处环境进行表征。例如,基于语义地图的环境表征,利用计算机视觉进行环境表征等。此外,为了更好的适应现实环境,近年来研究者们还提出,智能机器人应该具备理解自然语言指令的能力。为了解决这些问题,机器人自主导航问题衍生出了用深度学习进行自主导航的研究方向。基于语义地图和自然语言的路径规划以及基于机器视觉和自然语言的自主导航是基于深度学习的自主导航技术的重要组成部分。通过对移动机器人自主导航方法的研究,本文提出了一种注意力机制,对基于语义地图和自然语言的路径规划方法进行改进,不仅提高了准确率,还提高了模型的泛化能力;在基于机器视觉和自然语言的自主导航技术上,本文着重研究了多模态特征的处理方式,提出了一种基于注意力的多模态特征融合方法,能够有效地结合各种不同模态的特征,提高模型的准确率。本文的主要贡献包括:1)针对基于语义地图和自然语言的路径规划问题,本文从该问题的基本特性出发,将该问题视作子集抽取问题进行处理,并以指针注意力为基础提出了指针注意力网络,提高了基于语义地图和自然语言的路径规划问题的精度表现。此外,本文还提出了一种改进的Seq2Seq模型,在仅提高少量计算复杂度的前提下,提高了模型的精度表现。相对于指针注意力网络,该模型更注重速度和精度之间的平衡。另外,本文在虚拟环境中构建了训练集中的对应环境。并利用训练好的模型,基于自然语言指令和语义地图为虚拟环境中的机器人进行路径规划。测试结果证明了方法的可行性。2)针对基于机器视觉和自然语言的自主导航问题,本文从特征处理以及特征融合的角度出发,以自注意力机制为基础设计了多模态特征融合网络。通过对特征提取、特征融合、训练方式等多方面改进,使模型充分利用自然语言特征,低级视觉特征和高阶视觉特征,从而提高模型的精度表现。此外,本文提出的多模态特征融合网络具有灵活结构,可以适配需要处理更多模态特征的场景。通过在VLN的基准数据集R2R数据集,R4R数据集上的实验以及NDH基准数据集CVDN上的实验,证明了多模态特征融合网络对两种基于机器视觉和自然语言的自主导航任务都有很好的效果,具有很好的泛化能力。此外,本文将训练好的模型部署在移动机器人上,并在真实环境中进行测试。测试结果表明方法具有一定的可行性。
其他文献
关键词提取任务是一项基础的自然语言处理任务,其目的在于从文本中提取出具有代表性的关键词或短语。本文发现并讨论了当前序列生成模型存在的两个问题:传统的序列编码模型难以学习到文本全局的信息以及当前模型未能很好地学习标题的重要信息。前者讨论全局信息,这一信息在许多无监督方法中扮演着重要的作用,基于统计的方法正是利用全局词汇共现关系来得到文本关键词。而当前的序列生成模型仅仅是依赖文本上下文信息,抛弃了文本
废纸是我国造纸纤维原料的重要组成部分,随着我国废纸“零进口”政策的实施,目前,造纸行业面临的主要可持续发展障碍是如何利用好国内外废纸这一可再生资源。废纸纤维在反复回用过程中会发生纤维性能的衰变,主要表现为物理性能下降,白度降低等问题,废纸纤维性能的衰变限制了废纸纤维成纸品质及回用次数。寻找一种环境友好型的废纸纤维处理方法用以抑制纤维性能衰变,对于节约原生植物纤维原料、保护环境、实现造纸工业的可持续
冷冻和冷藏在易腐食品的质量保藏中起着至关重要的作用,然而,冰或霜在冷冻设备表面的不利堆积会导致大量的能量消耗,并伴随着生产效率的降低。近年来,基于超浸润系统的仿生表面已被证明可以延缓结冰结霜或容易除冰除霜,具有补充甚至代替传统除冰技术的潜力。将超浸润策略应用于食品冷冻冷链,对于减轻表面积冰、除冰对经济和环境的不利影响具有重要意义。然而,如何设计实用、可扩展和食品安全的仿生超浸润表面以应用于食品加工
待制品生产时间的预测使得企业能够把握生产情况,及时对生产性能的波动做出响应,降低因生产系统性能波动造成的损失。根据预测的结果,能够及时调整生产过程参数,提高生产性能,合理安排生产活动。但是对于多品种混流生产系统而言,由于产品的数量、种类、工序多种多样,导致生产系统变得复杂且具有高度的动态性,使得传统的分析方法对其对其生产性能的研究较为困难。本文针对现有研究的不足,采用离散事件仿真结合机器学习的方法
番茄采摘是番茄生产过程中的重要环节,随着番茄种植面积的逐年扩大、人口老龄化和农业劳动力减少,开发番茄采收机器人,研究番茄采收方法具有重要意义。番茄采摘的过程中,要求机器人快速识别番茄果梗采摘点,并具有良好的环境感知与避障运动规划能力,才能完成有效采摘。本文以番茄串为研究对象,构建番茄串收机器人系统,研究了实际场景下番茄串采收方法,提出了基于CTB-RRT*的运动规划算法,通过Gazebo仿真实验和
水系周边地区是人类文明的起源地,但自然水系和人类住区的交汇带来诸多优势的同时,也带来了特定的挑战。随着城市化的快速发展,城市水系空间不断遭到破坏,使城市失去了其生态本质,自然流域保护与城市开发建设之间的矛盾日益突出。城市水系空间既是城市中重要的公共开敞空间,又是与自然流域系统有物质能量交换的生态空间,还是承载城市滨水历史文化的景观空间。对其进行规划设计时,应当重视对水文特征的考虑,恢复城市良性水文
欧洲岩沥青(ERA)因其稳定性好、良好的高温抗车辙性能和价格低廉等优点而得到广泛的科学研究和工程应用。作为一种最常用的道路改性剂,SBS能够显著地提高耐久性、高温抗车辙性能和低温抗裂性。邻苯二甲酸二辛酯(DOP)能够显著提高沥青的低温延展性和柔韧性,在沥青研究中也越来越得到重视。本文制备多种掺量的岩沥青改性沥青,以全面地评价岩沥青改性沥青的性能变化规律。为了改善岩沥青改性沥青低温性能不足的缺点,本
雷暴预测研究是现代天气学和气象预报中最重要的主题之一,一般的方法是通过天气监测设备获取到雷暴相关的气象资料进行解构分析。近年来,人工智能技术也被引入到气象领域内,相比于传统的专家经验方法,新技术的计算性能和预测能力要更加出色,但在雷暴预测上使用机器学习、深度学习的方法还不够成熟。本文基于多种气象数据,针对雷暴路径、雷暴临近和雷暴图像的雷暴预测问题进行研究,主要的工作内容如下:(1)提出了一种卡尔曼
近年来,我国多地组织实施了山水林田湖草生态保护修复试点工程,各试点地区结合本地实际情况,积极推进试点工程,山水林田湖草系统保护的理念逐渐深入人心,初步探索出全局治理的新路径,积累了整体性、系统性开展生态保护修复工程的宝贵经验,对维护国家生态安全发挥了积极作用,但各地区的试点工程在具体的实施过程中也遇到一些问题和难点。为推动山水林田湖草生态保护修复试点工程的顺利实施,全面推进国土空间的生态保护修复,
我国预制装配式建筑方兴未艾,目前正呈现规模化良好发展态势。然而,受各种因素影响,大量废弃预制构件也正在源源不断产生。将这些构件破碎成再生骨料,实现预制构件厂内就地循环利用,不仅能降低成本、物尽其用,还能提高全产业链的废弃物利用率、促进建筑工业化进程中的绿色发展。基于上述考虑,本文从材料与结构角度,对采用废弃预制构件制备自密实再生骨料混凝土的可行性进行了初步探讨,具体工作和主要结论如下:1.开展了1