基于深度强化学习的机械臂避障轨迹规划研究

来源 :河南工业大学 | 被引量 : 0次 | 上传用户:liuyun
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着工农业、制造业的快速发展,以各类型的串联机械臂为代表的机器人的作用越发明显。为实现智能生产,针对机械臂的避障运动规划研究是关键。但是,人工示教与传统运动规划算法存在生产效率不高、智能化程度低等问题。对此,本文以二连杆机械臂和DOBOT机械臂为研究对象,采用深度强化学习方法进行避障运动规划。对机械臂模型的构建、动作状态与奖励模型的设计、深度强化学习算法的迁移性、仿真试验以及避障实验等内容展开研究。论文的主要内容如下:首先,在MATLAB平台中采用Denavit-Hartenberg(D-H)参数法建立二连杆机械臂和DOBOT机械臂的数学模型并根据机器人运动学对其进行运动学分析。在此基础上,采用圆柱体包络法对机械臂与环境中障碍物进行结构简化,以实现碰撞检测。其次,针对传统运动规划算法效率低等问题,采用深度强化学习中的深度确定性策略梯度(DDPG)算法进行规划。根据二连杆机械臂和DOBOT机械臂结构特性与避障要求,针对性地设置动作、状态、奖励函数以及算法中的超参数。对二连杆机械臂与DOBOT机械臂进行避障运动规划仿真试验。最终可为各机械臂规划出更优避障路径。完成试验后,对运动过程中DOBOT机械臂各关节角度、角速度以及角加速度随时间的变化进行分析。再次,为研究DDPG算法对于新环境的泛化能力,改变环境并对DOBOT机械臂进行试验。试验结果为,可以在新环境中规划出避障路径。同时表明,本文所用算法具有一定迁移性。最后,搭建基于Dobot Magician机械臂的实验平台并进行实验验证。实验结果表明,本文所用DDPG算法机械臂避障运动规划领域中具备可行性与迁移性。
其他文献
大豆11S球蛋白是大豆蛋白中含量最高的抗原蛋白,由于致敏特性限制大豆蛋白在水产饲料行业中的应用。因此本研究从大豆分离蛋白中提取11S球蛋白,通过酶解制备11S酶解肽;采用红外光谱方法对其结构进行表征,在应用ELISA法检测其致敏性;通过测量DPPH、ABTS、超氧阴离子、羟自由基评估大豆11S酶解肽的抗氧化能力;再基于代替鱼粉(5%)体内试验考察大豆11S肽对黄河鲤肠道组织形态、生长、免疫、抗氧化
学位
新收获小麦经过后熟品质得到改善,最终达到加工和食用品质的要求。本课题分析了新收获低、中、高筋三种不同筋力小麦后熟期间面团及面筋品质特性的变化规律,研究了面团品质特性、面筋聚集特性、面筋蛋白组成与结构、麦谷蛋白大聚体(glutenin macropolymer,GMP)含量与结构、面筋蛋白与GMP中二硫键和游离巯基间的转换的变化特点,在此基础上解析后熟过程中小麦二硫键异构酶(protein disu
学位
在人类生命活动中,食品作是最基本物质条件,其质量或危害成分关系到人民的身体和生命健康。随着社会发展和人民生活质量的提升,食品安全问题已经成为了全社会关注的热点问题。因此,开发快速、灵敏、低成本的高效分析方法对于评价食品质量与安全尤为重要。CDs(Carbon dots,CDs)作为新型荧光碳纳米材料,由于其具有优良而稳定的荧光发射,且生物相容性好,毒性低,在金属离子、有机小分子和生物分子传感分析及
学位
吸湿特性是农业物料所固有的一种特性,指材料吸附环境中水分的性质。本论文以4种饲料原料(玉米、豆粕、麦麸,菜籽粕)为研究对象,通过构建吸湿曲线,拟合吸湿模型,筛选出最优模型来表征吸湿过程。并对不同品种玉米通过吸湿特性与其营养成分,表面结构分形维数和初始含水率进行相关性分析,获得影响吸湿特性的因素;通过改变环境温度、湿度,探究环境因素对吸湿特性的影响。最后将具有不同吸湿特性原料按配方加工成颗粒,将各配
学位
黄曲霉(Aspergillus flavus)是一种常见的腐生真菌,其在储粮中的生长可降低储藏谷物的数量和质量并产生“三致”的黄曲霉毒素,对谷物储藏安全和品质造成严重威胁。防控储粮中黄曲霉的生长对保障谷物储藏安全和食用品质具有重要意义。研究表明谷物在储藏过程中会产生包括醇类,醛类,萜类等多种组分的挥发物。目前,对储粮挥发物的研究主要集中在谷物品质评价和储粮害虫趋避性等方面。但储粮挥发物组分对储粮真
学位
随着社会的发展和科技的进步,大量的有机废水被排放到环境中,对地球生态和人类健康造成不可逆的威胁。由于废水中含数目众多的有毒污染物,如何对这些污染物进行准确测定和高效去除是解决环境水污染的关键。然而,这些污染物多为痕量水平,在定量分析之前需要用合适的样品前处理技术对污染物进行提取和富集。近年来,随着材料科学的快速发展,具有微介孔结构的有机多孔材料和磁性分离材料在分离科学中逐渐成为研究热点。作为有机多
学位
油莎豆粕是油莎豆榨油后副产物,富含淀粉尤其是直链淀粉,后者在加工过程中极易糊化回生形成抗性淀粉。抗性淀粉(RS)通常无法被小肠直接消化吸收,可在肠道微生物作用下发酵产生短链脂肪酸而发挥重要作用。然而目前关于油莎豆粕抗性淀粉的制备及其生物学特性研究相对较少。本研究拟通过制备油莎豆粕抗性淀粉,并对其物性结构、理化性质及益生特性进行研究。1.纤维素酶辅助油莎豆粕淀粉的提取以油莎豆粕为原料,采用纤维素酶辅
学位
近年来,光催化技术由于其绿色环保、可持续性、对几乎所有有机污染物都可以高效矿化的优点,被广泛应用于环境修复领域。然而,由于粉体光催化剂难以回收、应用成本高等问题,使得光催化技术在该领域工业应用中难以推广。膜分离技术作为21世纪新型工艺,因其能耗低、易操作、处理效果好等优点,广泛应用于污水处理领域。然而膜污染、膜寿命短以及浓缩液处理等一直是限制其工业化应用的瓶颈问题。最近,研究表明光催化与膜分离耦合
学位
小麦胚营养非常丰富,现在越来越受到人们关注,而且谷物冲调粉也越来越成为人们改善个人饮食的一种选择,所以研制以小麦胚为主要原料的冲调粉具有重要的实际意义。本课题以小麦胚为原材料,采用挤压加工技术对小麦胚进行加工改性,通过单因素、正交试验综合分析得出其最佳挤压加工条件,并且分析挤压处理对麦胚基本组成成分、理化性质和微观结构的影响,探究在不同挤压加工参数下小麦胚的营养成分和抗氧化能力的变化规律;然后以冲
学位
去除水体硝酸盐污染是目前本领域的热点研究问题。本研究将电渗析和离子交换膜生物反应器创新结合,构建电渗析离子交换膜生物反应器(EDIMB)。在EDIMB系统中,通过电渗析作用强化离子迁移过程,提高硝酸盐的迁移效率;利用离子交换膜生物反应器的结构优势,将进出水和生物反应区域分隔开,避免出水的二次污染,在硝酸盐富集的同时发生硫自养反硝化反应,以实现对水体硝酸盐污染物的无害转化。本研究对EDIMB系统的操
学位