基于CPG与强化学习的六足机器人步态研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:comeandsit
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
六足机器人作为一种多肢体、多自由度的并联机器人,因其稳定性高、环境适应能力强、运动灵活的特点及广泛的应用前景,而受到世界各地科研人员的普遍重视,其中一个重要研究问题就是六足机器人的步态控制。六足机器人因其关节众多使得运动控制格外复杂,传统的一些运动控制方法并不能很好的适用于六足机器人的多关节结构,六足机器人的步态控制作为其技术发展的关键,依然是当前的一个研究热点。本文就六足机器人的步态控制进行了研究,主要内容分为以下几个方面:(1)基于CPG的六足机器人步态生成。首先,对组成CPG网络的Hopf振荡器进行改进,加入负载因子使其可以输出多种步态信号,并对改进后的Hopf振荡器通过单一参数原则进行参数分析,得到参数对振荡器输出的影响。其次,利用改进后的Hopf振荡器构建CPG网络,CPG网络采用全连接的拓扑结构,多个CPG单元之间可以实现双向连接形成腿间耦合。构建好CPG网络可以平稳的输出多种步态信号,并能快速的进行步态切换。(2)基于强化学习的六足机器人SCPG步态学习。CPG控制需要事先给出特定的参数来生成设定的步态,其本身并不能自发的生成我们期望的步态。针对CPG控制的不足,本研究提出一种基于强化学习的六足机器人脉冲中央模式生成器(SCPG)算法。首先,在CPG网络的基础上进行了改进,结合脉冲神经网络组成SCPG模型。其次,利用输入神经元来进行腿部神经元脉冲的触发,根据步态进行机器人奖励的计算。最后,通过STDP学习机制进行神经元连接权值的更新。SCPG网络成功的实现了六足机器人的步态学习,弥补了CPG的不足。(3)六足机器人硬件平台搭建及实验研究。首先,利用串联弹性驱动器(SEA)搭建了六足机器人硬件平台。其次,介绍了六足机器人运动控制的整体设计。最后,针对机器人的步态控制,分别进行了三、四、波动步态和步态学习的实验,实验结果验证了基于CPG的步态生成和基于SCPG的步态学习方式的有效性。
其他文献
等离子体对流是高纬电离层中的重要特征,其中蕴含着太阳风向磁层-电离层系统能量传输的一系列重要信息。研究电离层等离子体对流在时间和空间上的演化规律,对我们深入理解磁层-电离层耦合机制,以及后续空间天气的建模与预测具有重要意义。本文基于多种深度学习相关算法对Super DARN雷达网探测到的北半球高时空分辨率的电离层对流数据进行建模,构建出了高纬电离层等离子体对流图预测模型,并采用独立时间段的测试数据
在工业生产流程中,自动化功能测试设备可以保证出厂产品的安全性和质量。在家用电器领域,产品的安全性和质量是家用电器的两个最重要的指标,日益严苛的产品安全质量指标对自动化功能测试设备提出了更高的要求。本课题设计了一款自动化功能测试设备,主要包括硬件信号采集板卡、信号激励卡以及工控机上配套的测试软件,其可以根据厂商提供的仕样书快速的搭建整体的测试环境,且具有性能优良,操作方便以及测试效率高等优点。本文首
在实际生活中,若智能体不具备自主规划的能力,其将会很难实现编队控制,而围捕控制作为编队控制的一种,需要智能体自主形成编队、规划路径。因此,对多智能体系统的路径规划跟踪与围捕控制问题进行深入研究不仅具有重要的理论意义,而且具有实际应用价值。本文主要研究了基于多智能体系统的多移动传感器路径规划与围捕控制问题,研究内容如下:(1)针对静止多目标的围捕控制问题,提出了一种融合最优次模式分配(Optimal
混沌是非线性系统中产生的伪随机现象,其丰富的动力学特性具有重要的研究价值。混沌理论已广泛应用于物理学、密码学、通信学以及经济学等领域。其中,基于混沌系统的图像加密算法研究属于混沌理论与密码学的交叉学科研究,已成为当下的研究热点。忆阻器是具有非线性特性的电路元件,可用于构建新型超混沌系统。基于忆阻器构建的超混沌系统有利于产生特殊的混沌信号,并表现出复杂的动力学特性,比如:超混沌特性、隐藏吸引子以及共
博弈理论是一种研究多参与者(可推广为多智能体)之间合作共赢与利益冲突并存关系的理论依据,随着计算机网络的发展,学者们将博弈论应用到计算机领域的许多实际问题中,如大数据云计算、无线网络等。在应对复杂计算机系统工程问题时,可运用博弈理论建模并分析相应的收益函数、损失函数、动作策略等寻求博弈模型的最优解(即纳什均衡)以获得系统的最大收益。近年来迅速发展的分布式博弈作为博弈论与分布式优化相结合的新研究领域
随着无线通信技术的高速发展,正交频分复用技术(Orthogonal Frequency Division Multiplexing,OFDM)凭着其高传输数据率、高频谱利用率以及优异的抗多径衰落性能,在通信领域中发挥着非常重要的作用。但OFDM系统中也存在着过高峰均功率比(Peak to Average Power Ratio,PAPR)的问题,过高的PAPR不仅导致信号发生畸变,增加系统成本,而
近年来随着智能硬件和5G技术的发展,智慧安防、生物医疗、汽车电子等强实时性应用开始快速兴起。与此同时,AI任务日益复杂,神经网络所需算力越来越大,这使得无论是云计算或边缘计算都无法满足终端设备低时延、强算力的需求,为解决上述AI技术应用困难的问题,神经网络的硬件加速具有重要研究意义。对终端硬件而言,FPGA具有低功耗、高性能的特点,又比专用ASIC芯片更灵活,且开发成本低,十分适用于算法更新频繁的
位移传感器是应用最为广泛的传感器之一,在很多领域中都发挥着重要作用。其中,微波位移传感器有着独特的优势。一是其较好的稳定性,在不同的温度、湿度等环境条件下都可以稳定工作;二是其较低的成本,基于PCB技术的平面微波传感器通常生产成本很低。本文将平面微波位移传感器的设计作为主要研究工作,提出了两种H形一维线性位移传感器和一种基于CSRR结构的二维位移传感器,并通过数值优化的方法对传感器的参数进行了优化
在如今目标跟踪领域,多智能体网络,“马赛克战争”概念十分火热,随着传感器节点计算能力、通信能力的上升,传统有中心融合架构的集中式、分布式结构已经无法满足目标跟踪领域不断扩张的需求,去中心化的分散式网络结构开始受到人们的关注,扩展性好、灵活性高、抗损毁性强等特点展示了该结构潜在的应用前景。与此同时,不断增加与变化的应用场景使分散式网络下的多传感器多目标跟踪算法面临诸多挑战:1)分散式网络节点视场(F
随着数字化时代的不断推进,信息安全越来越受到人们的关注,各种加解密算法应运而生,并开始应用于各种不同的场合,而许多场合需要采用硬件来实现加解密算法,本论文即是研究高级加密标准AES的硬件实现。论文设计了AES硬件实现(AES硬件加速器)的整体结构,完成了总线接口模块、AES控制模块和AES加解密内核等三个组成模块的硬件设计和实现。论文的重点是AES硬件加速器中AES加解密内核的设计和优化。AES加