面向家庭环境的移动机器人局部路径规划算法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:the1295
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,移动机器人在仓储物流等领域迅猛发展,其相关技术也逐渐成为研究热点,其中移动机器人路径规划算法是导航技术的关键。并且随着机器学习在智能机器人方面取得了突破性进展,相关的机器学习算法在机器人领域的应用也在国内外掀起了研究的热潮。本文研究包括传统算法中的改进动态窗口算法(DynamicWindowApproach,DWA),机器学习算法中的强化学习算法与深度强化学习算法在移动机器人导航与路径规划中的应用,具体研究内容如下:  首先,本文针对传统DWA算法的问题,采用改进评价函数的方法,将全局路径作为DWA评价函数的参考轨迹,使其尽量按照A*等算法规划出的轨迹运动。同时,提出的方向评价函数,提高了机器人运动过程中方向的稳定性。提出的平滑速度评价函数与加速度评价函数,提高了机器人运动的平滑性与快速性。改进DWA算法被应用于实际移动机器人路径规划上,实验结果表明该算法能够优化机器人的运动路径,提高机器人运动的方向性、平滑性与快速性。  其次,本文提出的基于强化学习的移动机器人路径规划算法,针对移动机器人路径规划问题设计了环境状态模型,充分利用激光雷达获取的障碍物信息与目标点所在位置将其离散化成智能体的状态,同时采用了连续的报酬函数,使得机器人采取的每个动作都能够获得相应的报酬值,评价动作产生的效果,有效的提高了算法的训练效率。将机器人置于Gazebo仿真环境中训练试错学习,仿真结果验证了基于强化学习路径规划算法的有效性。同时在实际机器人上进行导航实验,实验结果表明算法在实际环境中也能够完成导航任务。  然后,针对强化学习算法收敛慢,状态不连续等问题,本文结合深度强化学习算法,运用神经网络拟合Q_table,将机器人前方120o范围内障碍物的分布情况与局部目标点所在方位作为状态输出网络,保证了状态的连续性。同时针对深度强化学习问题中训练样本池中有效样本过少,训练效率低等弊端,利用优先级的经验回放算法,有效提高了算法收敛稳定性,加速算法的学习效率。算法的有效性在Gazebo环境内的仿真与在实际环境中的实验得到了验证。  最后,进行深度强化学习算法与强化学习算法的仿真对比实验,仿真结果说明深度强化学习算法对于复杂环境有更强的适应能力。三种算法的对比实验表明改进DWA算法与深度强化学习算法对于动态障碍物的适应能力更强,深度强化学习与强化学习算法在运算效率方面具备优势。
其他文献
大地,背负着孕育芸芸众生的使命,方有每一寸土壤的隐忍与坚实;宇宙,承载着包罗璀璨星辰的使命,终得广博浩渺的胸怀;就连不起眼的无名小花,也有着自己的使命,芬芳一隅,绽放绚
期刊
本文通过对荣华二采区10
期刊
随着机械电子技术和医疗器械的发展,对呼吸机的性能提出了更高的要求,导致计算机控制在呼吸机上的应用越来越广泛。本文从系统的实时性和稳定性出发,研究和实现了基于Linux的呼吸机实时控制系统。首先,深入研究了呼吸机的控制原理,并在此基础上进行了呼吸机实时控制系统的硬件结构设计。利用数据采集卡对压力和流速进行数据采集,通过步进电动机调整按需阀的角度和方向,实现对压力和流量的控制。其次,在实现呼吸机的计算
党的十六大确立了“三个代表”重要思想在全党的指导地位,指出“三个代表”重要思想是对马克思列宁主义、毛泽东思想、邓小平理论的继承和发展,反映了当代世界和中国的发展
当前农村小学作文教学普遍存在这样一种现象:小学生不喜欢写作文,一提起作文就厌烦,提不起兴趣,总觉得无从下手,于是在作文中写空话、假话连篇、记流水账、逻辑混乱,胡编乱造。小学
质子交换膜燃料电池(PEMFC)是一类功率密度高、能量转换效率高、工作温度低、环境友好、装置简单和启动速度快的能量转换装置。但PEMFC的商业化应用受其催化剂成本高,稳定性差等问题的制约。为促进PEMFC的商业化发展,本文将低成本及具有催化性能的钨系氧化物和杂多酸与核壳型催化剂负载合成复合电催化剂,复合电催化剂在降低铂负载量的同时在一定程度上提高了氧还原反应(ORR)的催化活性、稳定性和耐久性,对
学位
电力变压器是工、矿企业和电力系统发变电的核心设备,正常运行与否关系到企业的安全和经济效益,变压器设备事故的发生还会影响或干扰国民经济的稳定运行。变压器油是用于变压器类设备内的矿物绝缘油,主要起到绝缘、散热和消弧作用。近几年来,我国发生了几起较大的变压器故障,主要是变压器内部放电和内部缺油导致的。同时加之特高压变压器的广泛使用,这对变压器油的质量监测提出了越来越高的要求。变压器油的氧化安定性是一项直
当前,计量器具已经被广泛运用在生产与生活中,其计量结果的准确性在保证产品的质量方面发挥重要作用,但是因为各种因素,计量器具在现实使用过程中常常出现失准的情况,本文就
从2001年起,伊犁州党校开始举办党员领导千部在职研究生班,为党员领导千部提高理论水平,加强在职学习,创造了良好条件。图为2003级在职研究生班 …伊犁州党校函授学院召开工
机械设备的管理与维修工作是企业运转中很基本的工作,但它却与其它工作形式有着一定的区别,机械设备的管理与维修工作是具有一定的时代特征的工程,并随着设备的不断创新更替,