基于多智能体进化和强化学习的机器人运动控制方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:cjt510
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机器人技术与人工智能学科的不断发展进步,机器人学展现出了广阔的运用场景,同时它代表着当今智能信息处理技术、自动化控制技术、系统集成等技术的最新发展。机器人的运动规划与控制作为机器人学的重要组成部分,具有十分重要的研究价值。本文对现有机器人在复杂环境下的路径规划、模糊控制、轨迹跟踪问题进行了系统的研究,主要工作总结如下:1.提出了基于多智能体进化的分层3D路径规划算法。以遗传算法、模拟退火算法和粒子群优化算法为代表的元启发式算法被广泛运用于路径规划问题。这些算法被普遍认为在性能、可扩展性和易于实现性等方面权衡后的最佳方法。但是这些方法具有计算量大、收敛速度慢的缺点。针对此,我们基于多智能体进化计算提出一种分层3D路径规划算法,在优化过程中,算法对不同分辨率的3D地图使用了逐层优化的策略,并设计竞争和自学习算子提高算法的局部搜索能力,分层递归优化过程可以大大减少计算量并有效地处理环境的动态特性。实验结果表明,该方法可以有效降低计算量,并加快收敛速度。2.提出了基于双模型深度强化学习的运动控制算法。在使用神经网络学习对机器人进行控制时,深度强化学习方法通常需要大量采样,导致学习的效率十分低下,这严重限制了该方法在许多实际任务中的运用。我们把控制移动平衡的神经网络称为智能体,基于此提出一种使用双模型(预言家和评论家网络)的算法来指导智能体的学习过程。先验机器人模型和移动参考路径构成了可用于指导智能体学习的预言家模块。无模型强化学习算法中的评论家模块可以进一步用于增强智能体能力并弥补环境模型引起的偏差,预言家模块可以减少现实任务中与环境的交互过程。实验表明,在无模型的强化学习过程中使用动力学模型进行规划是一种提高训练效率的有效方法。3.针对四旋翼飞行器的特殊动力学模型,提出了基于非线性PD轨迹跟踪算法。四旋翼飞行器作为一种特殊移动机器被广泛的运用于各个领域,传统的PID系列方法使用误差的线性组合的控制方式难以从根本上实现对轨迹的高精度跟踪。我们针对此,提出了一种双闭环的控制方法。在外环位置空间控制中,通过误差以及姿态解析计算输出一个关于空间误差比例和微分的非线性推力控制量;在内环姿态控制中,通过结合四旋翼飞行器模型计算出关于姿态误差的非线性角速度控制量。最后将非线性推力控制量和角速度控制量相结合完成3D路径跟踪控制。实验结果表明,该方法可以有效获得高精度的跟踪轨迹。
其他文献
砂土作为一种天然的建筑材料被广泛地应用在路堤、大坝、斜坡以及各种建筑设施基础中。在循环荷载尤其是地震荷载作用下,砂土发生液化进而引起坐落在砂土地基上的建筑物失稳和破坏。本文基于单剪试验,研究了初始固结应力、相对密实度、颗粒级配以及颗粒形状或材质对砂土单调循环特性的影响。具体内容包括:(1)通过进行砂土的不排水单调剪切试验,重点研究相对密实度、颗粒级配、颗粒形状或材质对于有效应力路径、应力应变关系的
目的在脊髓病变患者中,自主神经功能紊乱很常见。本文旨在观察横贯性脊髓炎(TM)、视神经脊髓炎(NMO)及多发性硬化(MS)等急性脊髓损伤患者膀胱及肠道功能障碍的发生情况及其对
小说翻译无论从读者的评价反馈,还是对译入语文化的影响,都是翻译领域中比较引人瞩目的。小说《围城》中出场的每一个人物都性格迥异,特点鲜明,他们的语言表达也各有特色,这其中存在很多语言的选择和顺应现象。小说《围城》是中华民族优秀传统文化的重要组成部分之一,把国家通用语文学作品翻译成维吾尔语,一方面有助于进一步增强中华民族优秀传统文化的影响力和感染力,另一方面也有助于建设各民族共有的精神家园,积极培养各
目的:研究M2型丙酮酸激酶(PKM2)和调控其泛素化水平的去泛素化蛋白酶(USP20)在胃癌中的表达,对胃癌细胞增殖与侵袭功能的影响,并初步探索其分子机制。方法:1)免疫组织化学法
学位
在马克思的哲学中,宗教问题并非是他的最主要方向和内容,但是马克思的宗教批判思想确实是构成他整个哲学大厦的基础,对其整体思想形成和发展的影响有着非常重大的意义。本文
目的:FAM83D又名C20Orf129或CHICA,是一种纺锤丝结合蛋白,在乳腺癌、肝癌等肿瘤中存在异常表达,并且影响肿瘤的发展和预后,这提示FAM83D在肿瘤的发生发展中起到重要的生物学
当今世界,重大工程已经成为一个国家发展国民经济、丰富国民体系不可或缺的重要组成部分。重大工程作为基础设施工程,不仅是复杂的系统工程,面临动态多变的外部环境、多样性
在社会经济迅速发展和人们生活水平大幅提高的今天,人民对健康的需求也日益增长,对卫生安全也越来越重视。在党的十九大报告中,“健康中国”上升为国家战略。然而,当前卫生监
学位