基于强化学习的工业机械臂运动规划研究

来源 :山东科技大学 | 被引量 : 0次 | 上传用户:danble
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机械臂是工业自动化系统中重要的组成部分,其运动分析与控制具有非线性多耦合的特点。传统机械臂算法大多存在建模复杂与环境适用性差的问题,无法满足多变的生产需求。为此,论文以工业智能化为出发点,提出一种基于强化学习的机械臂运动规划算法。该算法具有环境适用性,无需复杂的运动学建模即可在实际生产环境中进行应用。论文具体研究内容如下:分析强化学习算法的基础原理。结合实际工业生产环境对机械臂运动控制问题进行研究。以传统机械臂运动学算法为基础,结合马尔可夫决策过程对机械臂运动规划与控制问题进行建模。为了缩小仿真与现实之间的差异,构建机械臂仿真镜像模型,实现工艺模型到仿真镜像模型的转化。提出基于置信域策略最优化的机械臂运动规划算法。该算法以Actor-Critic框架为基础,结合实际机械臂运动规划问题进行研究得到价值函数与策略函数的表示方法。为保证机械臂控制策略的安全性与合理性,构造反馈函数对控制策略的优化方向进行约束,从而实现策略的安全搜索。同时,为加快最优策略的搜索速度减轻计算压力,选用“Hessian Free”方法进行策略函数的优化。最后,针对机械臂控制的实时性要求,提出一种基于现实环境建立仿真模型,在仿真环境中进行训练的机械臂强化学习解决方案。结合实验证明本文所提出的机械臂运动规划与控制算法的可行性。基于ROS机器人框架设计出完整的软硬件实验平台。分析实验结果,评估算法性能。经实验验证,基于强化学习的机械臂运动规划算法具有优越环境适用性与强鲁棒性。并且,通过强化学习得到的控制策略能够根据环境进行增量优化。
其他文献
目的:观察并评价中药芪仙薏酱汤联合美沙拉嗪肠溶片治疗脾虚湿蕴型溃疡性结肠炎的临床有效性、实用性、安全性。方法:将符合病例选择标准的60例患者随机分为治疗组与对照组,每组30例。治疗组予中药芪仙薏酱汤联合美沙拉嗪肠溶片口服;对照组予美沙拉嗪肠溶片口服,2周为1个疗程,共治疗8周。治疗结束后收集、分析数据,观察并评价两组患者的中医症状积分、Baron积分、Mayo评分、ESR、CRP,运用SPSS22
扩散现象广泛地存在于物理、化学、生物、金融等领域。研究各种复杂系统中粒子的扩散行为,有助于掌握系统的输运性质,为新材料的开发和制备提供重要的理论依据。线性系统的扩
改革开放以来,中国的经济社会发展迅速,“依法治国”的理念不断深入人心,公民对于司法的需求也在不断增长。近些年来,人民法院受理的案件数量呈倍增长,特别是在许多发达城市,
我国低空空域一直处于管制状态,通用航空的广泛商业应用并未正式启动,这是我国改革开放以来唯一没有开放的大产业。随着2017年发布了60多条促进通用航空发展的政策,尤其是有关顶层设计的政策性文件,其力度与频度前所未有。本文通过对通航产业现状的分析以及F通航公司的外部环境PEST分析,发现空中游览成为近年来表现平平的通用航空运营业中的一个亮点。营销策略作为企业管理的重要组成部分,决定了企业未来发展的命运
近年来传感器技术和无线通信技术突飞猛进,无线体域网取得了较大的发展,为人们带来了巨大的便利。IEEE于2012年3月发布了首个WBAN标准,但是该标准只针对物理层和MAC层做出了改进,并没有制定关于其他方面的标准,例如,WBAN目前仍没有专门的移动模型,也没有专属的路由协议。因此本论文主要针对WBAN移动模型及路由协议展开研究,主要研究内容有以下几点:(1)WBAN移动模型的研究。本论文基于随机高
有限元法是目前解决科学与工程问题最有效的数值方法,而在处理一些特殊问题,特别是间断问题时,传统的有限元法存在某些不足,扩展有限元法继承了传统有限元法的优点,并在处理
学位
对B介子两体衰变的研究是重味物理研究的重要课题。美国和日本的BaBar和Belle两个实验组对B介子的几百个衰变道做了实验测量,他们搜集到了~1.7×109个B介子对产生和衰变事例。
在有大动量交换的单举过程(Inclusive process)中,可以证明其散射截面可以因子化为部份子分布函数和硬散射核的卷积形式。该过程涉及到的量有部份子分布函数(PDF)以及横向动
带电粒子的输运过程是研究等离子体物理的重要组成部分,在传统的统计理论框架下,通常应用麦克斯韦-玻尔兹曼分布函数来描述该过程中的粒子速度分布规律。但是有观测结果显示,在天体物理和空间复杂等离子体中常常存在一种超热粒子,它们的速度分布规律满足非麦克斯韦分布或幂律分布,因此传统的玻尔兹曼-吉布斯统计不再适用。应用非广延统计理论可以研究具有幂律分布复杂等离子体中的输运过程。本文主要应用非广延统计理论研究了