基于强化学习的电液伺服系统位置控制

来源 :燕山大学 | 被引量 : 0次 | 上传用户:kms2006
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
电液伺服系统工作过程中,由于油液黏度随温度的改变而发生变化,缸体与密封圈之间的摩擦力等客观因素的存在,使得电液伺服阀控缸系统的高性能轨迹追踪面临很多挑战。因此,本文以电液伺服阀控缸系统为研究对象,采用系统模型参数辨识与强化学习控制相结合的方法,建立其液压系统模型,完成智能控制策略设计,搭建MATLAB/RTW实时仿真试验台并进行实验验证,以揭示强化学习控制与传统控制在跟踪精度上的差异性。液压伺服系统理论建模。建立电液伺服阀控缸系统数学模型,给定合理的系统介质、负载以及外部环境,通过将模型非线性因素进行局部线性化处理,确定待辨识的系统数学模型。系统参数辨识及其实验研究。编写Labview子VI闭环控制与数据采集程序,并对ATOS伺服阀进行零点校正,设计参数辨识实验,并且对模型中的未知参数进行最小二乘法参数辨识。基于TD3算法的强化学习控制。分析强化学习中构建智能体Agent、环境、建立Actor与Critic层的特点,替换全连接层为PI层,并在设置奖励函数时讨论误差系数a的合理性;以平均节点奖励变化率为评价标准,选取变化区间较大且变化率平稳的参数进行训练,通过GPU加速训练得到最优的PI参数,并与LQG等算法比较控制效果。液压伺服系统控制实验研究。采用Speedgoat原型目标机作为控制器,搭建快速原型控制试验台,在对IO板卡进行信号测试和转换信号模块设计的基础上,对系统进行开环与闭环控制测试,部署已训练的强化学习策略,通过Data-Inspector模块记录系统在不同策略下对指令信号的跟踪状态,验证控制方案的合理性及控制算法的有效性。
其他文献
连铸结晶器保护渣作为连铸过程中必不可少的部分,对提高铸坯质量和保证连铸工艺的顺利运行有着重要作用。在连铸过程中,保护渣具有改善传热和润滑、防止二次氧化、保温和吸收上浮夹杂等作用,其中保护渣的润滑作用可以提高铸坯表面质量,减少发生漏钢事故。据报道,连铸过程中65%以上的漏钢主要是由于保护渣润滑不良引起的。因此,研究保护渣的润滑特性尤为重要。本文主要研究了不同拉速、结晶器振动方式和非正弦因子对连铸过程
学位
在轧制领域中,随着热轧技术的发展,热轧带钢的市场需求日益增加,对产品质量要求越发严格,其中表面质量是热轧带钢产品质量最重要的指标之一,如何有效的诊断表面质量缺陷成为了轧制领域研究的热点。本文基于缺陷机理分析结合深度学习方法建立高准确率的表面质量缺陷诊断模型,对于热轧带钢生产过程中表面质量缺陷的诊断与分类有一定的指导意义和应用价值。本文综述了热轧带钢表面质量缺陷机理研究现状,深度学习的发展现状,深度
学位
柔性下肢外骨骼因其便携、舒适的特点,在康养、助残、运动保护与增强等领域具有广阔的应用前景。通过柔性外骨骼为运动关节助力,可以有效降低用户体能消耗,但辅助的关节越多,需要的电机越多,导致外骨骼重量增加,抵消了外骨骼的辅助效果。针对该问题,本文提出了一种多关节柔性下肢外骨骼,并深入研究了该外骨骼机器人的助力曲线、绑缚结构、运动意图提取以及控制系统等关键问题。首先,人体下肢运动信息是多关节柔性下肢外骨骼
学位
科研机构的健康发展对提高我国创新力具有重大意义,对科研机构进行评价不但能够对不标准的科研活动进行管制,还可以鞭策科研机构提升自主研发的热情。然而随着国家科研水平的不断提高和社会诉求的日益高涨,现阶段的学术评价不能只依靠学术成果的数量和等级对高校、学者作出简单的评分,更是结合了学术产出质量和社会影响力的全息数据画像。因此,在完善我国科研机构评价体系的过程中,不仅要关注科研机构的科研成果产出影响力,也
学位
设计与制造者追求的主要目标之一是用更小的能耗生产出更多的效益,因此轻量化技术越来越受到各国制造业的追捧和重视。液压系统在制造业中应用广泛,液压油箱作为在液压系统中空间和重量占比均较大的辅助装置,最具小型化和轻量化潜力。长期以来,液压油箱容积计算方法都采用《机械设计手册》中推荐的经验公式进行估算,存在油箱体积过大、储装油液过多的问题,已不足以匹配现代移动机械对小型化和轻量化的快速发展需求。本课题围绕
学位
干部人事档案集中反映着干部本人的工作业绩、政治品行、廉洁自律、遵纪守法、工作家庭及社会关系等情况。它是组织部门选拔、任用干部的重要依据,也是重要的执政资源。加强干部人事档案管理对干部人才队伍建设具有重要意义。但受各种因素的影响,当前我国干部人事档案管理存在着一定问题,影响了其为人事组织部门提供服务的效果。如何有效提高干部人事档案管理工作水平,是档案工作者面临的一个重要课题内容。本文基于新公共管理理
学位
随着现代科学技术的发展,互联网等信息化设备在人们生活及学习重点应用越来越普遍,“互联网+”与人们的联系也愈来愈紧密,在“互联网+”时代背景下,互联网设备在改变人民群众生活学习的同时,也会为人类社会的发展带来极大的便利,从而影响各行各业的发展。在“互联网+”时代背景下,我国的教育工作及教育模式也在不断变化,各种类型的教育理念不断凸显,互联网设备的运用也在不断地改变着我国的教育模式,在音乐学科教育领域
期刊
弃管小区是我国社会、经济发展过程中出现的一种特殊社区形态。改革开放、城市改造的背景下,众多城市存在着不同程度的小区弃管现象。尽管政府基层组织承担着包括弃管小区在内的居住区的相应管理职责,但相较于一般住宅小区而言,弃管小区仍然存在着由于治理主体缺失等问题所引起的诸多严重问题。本文研究的主要内容是聚焦长海县A镇弃管小区的治理工作,着重分析该镇弃管小区治理过程中存在的问题和原因,并据此提出相应的改进对策
学位
EP管因具有良好的高温抗氧化性能、耐晶间腐蚀性能和较高的表面光洁度,用途十分广泛。在EP管生产过程中,常采用冷轧成形方法,皮尔格冷轧法是冷轧管材成形方法中最具代表性的方法。二辊皮尔格冷轧管机,又称精密冷轧管机,其轧出的钢管机械和物理性能优越,轧机的孔型设计是生产高质量成品管的关键工序。在采用椭圆型孔型进行管材轧制时,发现管材内壁与芯棒表面难以保持良好的贴合状态,导致变形区内表面产生褶皱,生产出的成
学位
空间站对接机构组合体是我国正在建设的永久服役空间站的关键部件,承担着各舱之间对接、分离、转位和再对接等任务。在轨服役过程中,组合体承受复杂的动载荷,其结构强度能否满足服役要求至关重要。本文围绕组合体结构强度能否满足服役要求开展研究工作,具体内容如下:(1)组合体等效模型构建。以组合体为研究对象,介绍了组合体的结构组成、工作原理和服役载荷,根据其各部件工作原理、作用不同,在有限元分析软件ABAQUS
学位