基于强化学习的气动肌腱拮抗式仿生关节运动控制

来源 :河北工业大学 | 被引量 : 0次 | 上传用户:zhangchenlin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手是使人具有高度智慧的器官,也是人与环境交互的重要环节。随着社会对机器人技术要求不断提高与和需求不断增加,仿人机械手的研究与开发工作得到迅速发展。其中驱动技术与控制技术是仿生手研发的关键技术。现存的机械手大多以直流电机作为驱动元件,但是受直流电机固有特性的限制,这些仿生手存在质量大、使用安全性和柔顺性低的问题。为了拥有柔顺的关节特性,许多研究人员将注意力集中在人造肌肉上。气动肌腱作为一种新型的标准工业执行元件,因其具有良好的柔顺性、功率/重量比高、节能环保、成本低等特点,已经被广泛作为仿生机器人和机械手等对象的驱动元件。本文从运动生物力学的角度分析,受人手骨骼肌肉结构的启发,设计了一种采用气动肌腱模拟人体肌肉特性为关节提供驱动力,传动方式为腱传动的气动肌腱仿生关节。通过对该关节建模与分析,将深度强化学习算法应用于该关节,实现了该关节的运动控制。首先,建立单根气动肌腱特性测试平台对气动肌腱进行测试,进而建立单根气动肌腱数学模型,并对气动肌腱特性进一步展开分析。并以此为基础建立了气动肌腱拮抗式仿生关节静力学模型与和运动学模型;根据该关节可变刚度特性,建立关节刚度模型和位置/刚度解算模型;针对该关节腱传动的特点,分析了运动过程中保证腱绳张紧条件,保证在运动过程中数学模型与实际装置状态的一致性,为实现该关节的位置/刚度控制奠定基础。其次,针对该关节难以建立准确的数学模型的不足,提出将深度强化学习算法应用于该关节的运动控制。通过对该关节无惯性和有惯性两种工作状态的运动控制方法的研究,验证了将强化学习应用于该关节运动控制的可行性。对于强化学习算法需要在实际装置中收集大量样本、与环境交互时间长的问题,提出了将传统非线性算法与强化学习算法相结合的思想,利用传统非线性算法制作样本数据,缩短强化学习算法的运行时间,加快强化学习算法的训练速度。最后,设计该关节的控制系统,搭建单关节实验系统平台,并在此基础上进行该关节的运动控制实验。通过对实验数据的对比与分析,验证了所建立的气动肌腱和仿生关节的数学模型的准确性,以及将强化学习算法应用于该关节运动控制的有效性。
其他文献
察尔汗盐湖因其丰富的各种无机盐资源而闻名世界,无机盐资源储量居我国盐湖之首。虽然盐湖矿产资源得天独厚,但在其资源开发过程中依然存在诸多问题,尤其是开发钾资源的同时极大忽视了其他资源的开发,造成产品竞争力弱,资源严重浪费,盐湖污染问题日益严重。由于无氯钾肥具有独特优势,无氯钾肥的生产越来越受到盐湖企业的重视。基于盐湖光卤石矿为原料与工业副产物硫酸铵反应生产无氯钾肥工艺优化,以及盐湖提氯化钾后副产氯化
随着市场经济及经济全球化的快速发展,企业要通过不断追求更大的利润,来保证能够在市场的激烈竞争中胜出并长远发展下去,因此成本对企业的影响越来越大。项目的系统化和复杂化使得项目不再是单一阶段,不同阶段可能采取不同的承包施工模式。如何认识各阶段成本管理的共性和特殊性,从系统和流程的层面进行整体控制,成为项目管理中成本控制的新方向。运用先进的成本管理方法,建立一套系统的项目成本控制体系,完成项目成本从预算
随着人口老龄化的加速,中国的建筑工地都面临一个问题:劳动力短缺。各大建筑工地工人以“60后”、“70后”居多,加之建筑行业存在危险、作业方式粗犷、劳动效率低等问题无法吸引年轻劳动力进入这一行业。纵观第一次工业革命到今天,人类在各个领域的进步不断,科学技术取得了极大的进步,但是建筑行业的施工作业方式在近一百年内却没能得到显著的进步。建筑行业依然是世界上数字化、自动化程度最低、依靠劳动力最多的行业之一
加氢脱氧(HDO)是生物质热解油升级的有效方法之一。目前HDO催化剂仍然以贵金属为主,开发低成本、高性能的催化剂面临巨大挑战。金属磷化物尤其是Ni2P,因其特殊的结构和性质等特点,在一些反应中的催化效果可以媲美贵金属,能高效催化酚类化合物(生物油的重要成分)的HDO反应。本文制备了两种不同结构的Ni2P基催化剂,并对其进行改性。同时利用这两种催化剂催化生物油模型化合物愈创木酚的HDO反应并优化了实
风电叶片是风力发电机组的重要构件之一,在生产以及后期维护过程中需要进行打磨处理。目前,风电叶片表面主要通过人工进行打磨,人工打磨存在诸多缺点,不仅难以保证表面打磨质量的一致性,而且打磨粉尘严重影响工人健康。随着科学技术的发展,机器人自动化打磨风电叶片已成为一种发展趋势。风电叶片属于大型曲面构件,主要由玻璃钢等复合材料构成,玻璃钢复合材料磨削加工中承受的温度较低,较高的磨削温度容易引起表面材料软化或
信息技术和生产技术的快速发展,使得企业生产模式发生着巨大改变。信息技术的进步为客户参与产品开发全过程准备了条件,柔性制造技术和设备的大量使用,使得定制化生产工艺准备时间大大缩短,很多零部件的生产批量不再是成本的关键制约因素,使在设备能力范围内快速低成本生产定制产品成为可能,大规模定制生产模式开始向大规模个性化生产模式转变。建立产品平台是实现大规模定制的基础,柔性产品平台是拓展产品平台衍生产品能力的
细菌感染已经成为世界上威胁人类生命健康的严重问题之一。因此,新型多功能抗菌材料的研究已成为科学家们的关注热点。光热疗法(PTT)是一种先进的抗菌方法,通常利用近红外(NIR)光吸收剂将光能转化为热能,从而导致病原菌的热消融。氧化石墨烯(GO)作为石墨烯的衍生物,溶解性和稳定性良好,具备一定的抗菌能力,而且很少会产生细菌耐药性,是一种潜在的抗菌材料。同时,GO具有较好的近红外光吸收特性和导热性,可用
本文采用简单水热及退火处理结合模板法制备出不同形貌的钴基双金属氧化物电极材料。考察了沉淀剂用量、水热温度和煅烧温度对Zn Co2O4电极材料的影响,并通过与水热碳基材料复合及控制模板剂用量改善Zn Co2O4电极材料的电化学性能。同时,考察了煅烧温度和不同模板剂对Fe Co2O4电极材料的影响。通过XRD和SEM等对材料的组成和形貌进行了分析;通过CV、EIS和GCD等对电极材料进行了电化学性能分
酶是具有专一性、高效性等优势的生物催化剂,在环境治理、油脂工业和食品加工等行业具有广泛的应用前景。但酶分子的结构易受环境的影响,在实际应用过程中操作稳定性差、难以回收再利用等缺点限制了其应用。仿酶和固定化酶等技术的提出可有效解决这些问题,其具有稳定性高和制备工艺简单的优势,是实现绿色化学过程的有效途径。本研究以共价有机框架为出发点,合成了具有催化活性的功能性材料和具有核壳结构的载体,分别以其为载体
触觉信息是机器人感知工作环境的重要途径之一,也是人机协作中保证安全性和舒适性的关键因素。然而,相对于视觉、听觉以及嗅觉传感器的发展,触觉方面的应用和产业化仍相对滞后。本文针对触觉传感器现有技术中的缺陷,设计了面向人机界面的超级电容式柔性触觉传感器,其具有灵敏度高、测量范围大、高柔性、高信噪比、结构简单、制备和使用成本较低等优点。本文对触觉传感器的整体结构和感知原理进行分析,传感器由上下两层电极和中