基于改进Q-Learning的机械臂无标定视觉伺服控制系统研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:zhengwei2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会的不断进步,人们迫切的需要更加智能的机器来替代人完成那些危险的或者更复杂的任务,其中,机械臂的使用非常广泛。机械臂无标定视觉伺服控制直接根据目标在图像空间中的描述来进行控制,并不需要在笛卡尔空间中进行控制,从而避免了标定视觉伺服控制中复杂空间变换导致的一系列缺陷,可以直接在图像空间设计控制律,成为重要的研究方向。由于机械臂无标定视觉伺服控制直接在图像空间设计控制律,存在在笛卡尔空间中的轨迹优化问题。此外,大量工业机械臂无法支持ROS这样的先进控制系统,导致基于ROS的大量应用和智能算法很难直接应用。基于上述问题,本文将Q-Learning算法和ROS加入到机械臂无标定视觉伺服控制系统中。在保证系统稳定性的基础上,优化机械臂系统的运动轨迹,提高系统运行的快速性。主要研究内容如下:(1)提出了一种基于改进Q-Learning的机械臂无标定视觉伺服控制方法。对QLearning算法中的动作选择策略和状态-动作值函数进行改进,从而降低学习的任务量,提高系统的收敛速度,通过自学习来不断优化机械臂在笛卡尔空间中的运动轨迹,同时提高运动控制的快速性。(2)提出了一种基于ORIN2-ROS中间件的机械臂视觉伺服控制系统结构。设计采用了ORIN2-ROS中间件,从而完成机械臂系统与ROS之间的交互,进而构建了完整的机械臂视觉伺服控制系统平台。(3)搭建了基于MATLAB的仿真实验平台和基于DENSO机械臂的实物实验平台,对实验方案进行了设计,经过对各种实验结果进行综合对比,验证了本文所提结构和方法的有效性。
其他文献
自进入工业时代,人类社会迅速发展,却付出了巨大的生态代价,2018年我国建筑全过程能源消耗约为21.47亿tce,占全国总量的46.5%,建筑全过程碳排放总量为49.3亿t CO2,占全国碳排放总量的51.3%。既有建筑围护结构性能提升是节能减排、维系生态平衡的有效手段。本文应用生态生命周期分析(Ecological-based Life Cycle Assessment,Eco-LCA)方法,对
伴随着工业化与城镇化,世界范围内能源短缺的问题日益凸显。建筑作为三大能源消耗部门之一,具有巨大的节能潜力。暖通空调系统能耗是建筑能耗的重要来源,其占据了建筑能耗的50%以上。为了减少建筑能耗和减轻环境污染,近几十年来,许多可再生能源被引入暖通空调系统,其中太阳能与地热能具有巨大的应用潜力,吸引了许多研究人员的目光。利用太阳能促进室内通风的太阳能烟囱以及利用土壤对空气进行预处理的地埋管系统在世界各地
乡村聚落的空间形态是地域自然环境和历史文化长期积淀的外在表征,也是传统文化与乡土记忆的重要载体。传统农耕时期,小农经济模式下乡村聚落依附于土地资源并较好地延续着其乡土特色,以宗族、文化等为纽带维系其社会关系;二十世纪下半叶以来,在工业化、城镇化以及全球化的推动下,乡村聚落的经济结构、社会文化发生了巨大的变化,乡村空间随之演变与重构,同时也出现了用地浪费,建设散乱、特色衰微、形式雷同等问题。因而研究
随着精密制造、精密测量等技术的发展,其对工作环境的振动要求越来越高。传统的被动隔振方法已经不能满足时变振动的抑制要求。磁流变弹性体(MRE)半主动隔振器在磁场下参数可调、功耗低和响应快,因此在振动领域受到了越来越多的关注。本文采用MRE隔振器对微动精密制造与微动测量平台的振动进行抑制。控制系统中隔振器模型的精确性、控制器的优化与振动衰减性能有直接相关,因此,本文针对微动半主动平台控制应用中的这些问
分布式电源、电力电子技术以及直流负荷的大规模应用推动了直流配电网的发展,但直流电弧因没有过零点难以自行熄灭,严重威胁了直流配网等直流系统的安全性。直流断路器是直流系统重要的保护设备,实现无弧开断有利于延长设备寿命,并保障系统安全稳定运行。现有的电弧检测方法仅能在电弧发生后做出信号预警,并不能从根源处抑制电弧发生,不足以实现对系统的可靠保护。为保障直流配电网的安全、可靠运行,抑制电弧的发生,需研究电
随着人工智能与大数据技术的不断发展,数据被滥用、用户隐私遭泄露等诸多问题层出不穷,引起了人们的广泛关注。在一些含有微型设备(如智能穿戴式设备)的应用场景中,除了存在关注的隐私问题外,由于微型设备资源有限,其数据处理能力相对较弱。压缩隐私和压缩感知技术的出现,为解决上述这些问题提供了新的思路。除此之外,数据在网络传输和存储过程中可能丢失或者被噪声污染,会严重影响数据的可用性。矩阵补全方法可以补全不完
多孔钛基复合材料兼具着多孔金属材料与钛基复合材料的优异性能,不仅能够在保证材料综合力学性能的基础上减轻材料重量,还具有更强的韧性,耐腐蚀性以及耐高温性能,因此多孔钛基复合材料具有非常广泛的应用领域及前景。为了对多孔钛更进一步的研究,通过对其制备工艺流程进行优化,将其他具有多种优良特性的增强体与其结合成为先进功能材料或结构材料,以满足不同领域对材料的应用需求。研究颗粒增强体碳化钛和碳化硅对多孔钛基复
随着国家对电动汽车(electric vehicle,EV)产业的大力支持和推广,未来大量电动汽车接入将会对配电网的安全运行提出挑战。与此同时,源-网-荷呈现出电力电子化的发展趋势:在负荷侧,电动汽车通过充电桩的变流器接口接入配电网,充电桩具有灵活快速的控制特性,可有效地改善配电网的电压分布;在电网侧,智能软开关(soft open point,SOP)作为一种可控的电力电子装置,可取代常规的联络
日本文部科学省2019年发布的校园欺凌调查数据显示,欺凌认定总件数为612496件,比2018年的认定件数多68563件;重大事件发生件数为723件;1年内,全国30583所学校都曾发生欺凌事件,占学校总数的82.6%。由此可见,日本校园欺凌肆虐,如今已成为严重的社会问题。加之,校园欺凌带来的危害几乎贯穿于人的一生,不仅危害被欺凌者的身心健康,对于欺凌者也会带来各种负面影响。对此,2013年,日本
长江航运自上世纪70年代起步以来发展迅猛。长江集装箱运价指数作为长江流域航运的“晴雨表”,一定程度上可以反映长江集装箱市场行情。相关的航运公司与输运决策人员可以根据运价指数的变化来掌握长江集装箱运输市场的变化,迅速调整航线和运力分配,并降低物流成本;政府部门还可以依据长江航运市场的波动进行宏观调控,促进长江经济带黄金水道的建设。本文通过理论分析选取原油价格和制造业采购经理人指数作为候选影响变量,深