基于强化学习的机器人智能路径规划

来源 :组合机床与自动化加工技术 | 被引量 : 0次 | 上传用户:z987z654z123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为了减少制造成本、提高焊接效率,让机器人能适应不同形状的焊缝,具备类似人一样的自主学习和决策能力,提出将基于强化学习的路径规划智能算法运用在焊接机器人上。在采用马尔可夫决策过程构建焊接机器人的路径规划模型的基础上,运用激光雷达让机器人拥有感知焊缝的能力;接着基于改进的深度Q网络算法,利用神经网络拟合机器人的自主决策函数,让机器人能自主选择合适的动作;最后结合机器人操作系统(ROS)和Gazebo仿真软件,根据焊缝的简化模型对提出的算法进行仿真实验。仿真结果表明,机器人能成功地对训练模型完成路径规划,并能将学习到的知识进行迁移,顺利完成在未知测试模型上的路径规划任务,证实了算法的可行性。
其他文献
森林公园是我国生态建设的重要组成,也是改善环境与休闲娱乐的公共空间。结合新理念新使命新需求,对城市森林公园的主轴线空间、功能定位、视觉呈现、文化氛围等进行改造,能够在体现其自然、生态、野趣的特征下,逐步构建市民百姓喜爱的生态空间,促使森林公园可持续发展。生态理念下的城市森林公园改造设计。随着生态文明建设的持续推进,生态主题的城市森林公园逐渐成为当前城市公园设计的主流趋势,
期刊
党的十八大以来,长江经济带发展战略全面深入推进,长江保护与治理事业进入高质量发展阶段;与此同时,日新月异发展的互联网信息技术,正加速重构媒体格局、重塑传播生态。面对水利行业深度调整和传媒业态深刻变化的双重挤压,《人民长江报》顺应时代潮流,准确把握行业改革发展形势和新闻传播规律,经过近5年的探索与实践,形成了由报纸、新闻网站、微信公众号、央媒视频号等组成的融媒体矩阵,打造了以“长江水利”为品牌标识的
期刊
目的:血栓形成是复杂的病理生理过程,与血小板和内皮细胞的活化密切相关,且内皮细胞可以独立于血小板通过影响纤维蛋白产生而影响血栓形成。目前临床常用的抗血栓药物主要包括抗凝血药物和抗血小板药物,但是由于其作用单一且常伴有出血等不良反应造成临床治疗效果不佳,因此开发新型高效且安全的抗血栓药物具有重要的临床意义。二氢杨梅素(Dihydromyricetin,DHM)是一种黄酮类化合物,对于心血管系统具有广
小核仁RNA(sno RNA)在各种组织的形成过程中发挥着重要的作用。然而,至今为止sno RNA是否在脂肪生成的过程中起作用还没有文献报道。SNORD126是一种含有C/D盒的sno RNA。之前,我们证明了SNORD126通过上调成纤维细胞生长因子受体2(fibroblast growth factor receptor 2,FGFR2)的表达激活磷酸肌醇-3激酶-蛋白激酶B(phosphoi
目的:抑郁症目前是发病率最高的神经心理疾病之一,除了表现出兴趣减退、悲观绝望等情绪障碍症状,还常常伴随有思维迟缓、记忆力下降等认知功能障碍。而这种认知水平下降可能是由脑内代谢废物如Aβ蓄积,以及脑血管功能障碍所导致。“类淋巴系统”(glymphatic system)是由大脑血管基底膜与星形胶质细胞终足组成的基底膜共同构成的中枢神经系统代谢废物清除途径,而位于其中的血管周围巨噬细胞(perivas
目的:1.构建DBM-明胶的核壳结构微组织,在体外评价其力学仿生性能和促BMSCs成骨诱导活性;2.建立大鼠皮下异位成骨模型和原位颅骨缺损模型,评价核壳结构微组织的体内骨缺损修复再生能力;3.建立一种磁控结构化液滴技术,通过磁矩编程和液滴焊接实现骨组织工程微组织的精细操控及组装。方法:1.在体外利用微阵列芯片制备DBM-明胶的核壳结构微凝胶,通过光镜和SEM表征其大体结构,并测量其弹性模量、BMP
第一部分:肝癌合并肝硬化脾功能亢进不同手术治疗方式的比较目的:目前,国内外相关指南中对于肝癌合并肝硬化脾功能亢进病人的治疗方法尚未达成共识。对于肝癌合并肝硬化脾功能亢进病人,单纯行肝切除术治疗效果往往不佳,而肝脾联合切除既处理了肝脏肿瘤,又解决脾功能亢进,其疗效如何,尚无定论。本研究采用倾向性评分匹配的方法,评价肝切除联合脾切除术治疗肝癌合并肝硬化脾功能亢进病人的近期及远期疗效。方法:回顾性收集2
第一部分COVID-19患者外周血淋巴细胞和细胞因子谱动态变化特征目的:研究COVID-19患者外周血淋巴细胞亚群和细胞因子谱的动态变化特征及其与疾病严重程度的关系。方法:多时间点收集2020年1月5号到1月24号武汉协和医院收治的40例核酸确诊为COVID-19患者的外周血标本,并通过流式细胞术和特异性免疫测定法检测淋巴细胞亚群以及细胞因子。结果:在确诊的40例COVID-19患者中,相比较于2
第一部分通过加权基因共表达网络(WGCNA)分析鉴定与甲状腺乳头状癌发病和进展相关的关键基因及机制背景:甲状腺乳头状癌(PTC)的发生和发展的基因和遗传机制尚不明确。本项研究旨在寻找与PTC发病和进展有关的关键基因及相关机制。方法:从癌症基因组图谱(TCGA)数据库中下载PTC和正常组织的RNA测序数据,以及临床分期的数据,最终构建测试组、验证组和临床分期数据组矩阵。首先,使用测试组数据矩阵进行差