基于多约束目标的智能水下机器人运动规划方法研究

来源 :哈尔滨工程大学 | 被引量 : 0次 | 上传用户:hhkkpump
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
智能水下机器人(Autonomous Underwater Vehicle,AUV)是探索海洋的重要工具,它可以执行环境监测、海底地形测绘、环境评估、管道检查、目标搜索以及水下航行器科学研究等多种任务。对于AUV而言,运动规划能力是其智能的重要体现,它贯穿AUV工作的始终,是AUV的重要组成部分,因此对运动规划技术的研究具有重要而深远的意义。本文以装备预研共用技术(41412030201)为背景,研究并设计了一种基于多约束目标的运动规划系统,使用深度强化学习方法,综合考虑AUV的传感器限制以及其执行机构的约束,实现了 AUV在无地图环境下,躲避障碍物同时抵达目标点的运动规划任务。论文的主要工作如下:(1)本研究以哈尔滨工程大学开发的某小型AUV为基础,参考其传感器配置与执行机构能力,对运动规划系统进行分析及建模。(2)本文针对传统强化学习模型难以处理连续动作空间的问题,设计并实现了一种基于策略的AUV运动规划系统,使用深度强化学习方法直接逼近策略,优化策略,实现了 AUV的连续动作空间的规划,可以达到更为精细的规划效果。除此之外,针对AUV的运动规划任务需求,参考课程学习的思想,设计了适用于AUV运动规划训练的课程。让规划系统在完全的未知环境中进行了仿真测试,验证了系统的可行性。(3)本文针对基于深度强化学习的AUV运动规划系统奖励函数难以设计,容易出现意外解以及连续状态动作空间下奖励稀疏等问题,设计并实现了一种基于好奇心奖励的奖励函数设计方法。方法模拟了人类的好奇心,鼓励AUV更多的探索位置的环境状态,训练过程说明了其在更大的状态空间下,好奇心奖励的优势。与此同时,让规划系统在完全的未知环境中进行了仿真测试,验证了系统的可行性。(4)考虑海流对AUV的干扰作用,进行未知环境下存在海流干扰的规划系统仿真试验,仿真试验验证了本文提出的基于好奇心奖励训练的AUV运动规划系统具有对海流环境的抗干扰能力。
其他文献
骨科亚学科的分化导致专业型增强。调查发现,脊柱外科研究生对脊柱激素损伤的基本概念、救治流程、预后判断和并发症防治掌握不足。教学组将损伤控制理念引入研究生的脊柱脊
高效实施大学生"助研计划"项目,让该项目在实施过程中达到较好的效果,需要在"助研计划"项目宣传、重视大学生甄选、教师合适指导及学校对计划的监督和奖励等方面做好工作,以达到
东沟1984年发生了有史以来至今最大的洪水,针对"84.6"特大暴雨的过程、成因和洪水过程进行分析,对灾害原因进行了总结并提出相应对策。
分析化学学科内容不断丰富发展,教学不但要夯实基础知识,更需着力培养学生的学习能力和创新思维,以满足现代高等教育人才培养的要求。文章论述了药学类分析化学教学改革的新
为了解施肥对观赏桃‘元春’(Prunus persica’Yuanchun’)生长发育规律的影响,并筛选出最佳施肥配方,为‘元春’的栽培管理提供理论指导。本研究采用盆栽试验,以四年生观赏桃
韩府湾水文站因2016年河道治理工程,水文测验断面发生变化,断面重新砌护,原报汛方案不适宜。本次制定了水位面积关系曲线和水位流量关系综合曲线两个报汛方案,为防汛及时、准
阐述了哈尔滨市河道水管单位体制改革的模式,分析水管单位改革中存在的问题,提出解决问题的方法和采取的措施,并对此进行了探讨。
目的 分析评估个案管理模式对精神分裂症患者实施管理治疗的效果.方法 通过使用一般状况调查表、危险性评估量表及临床总体印象量表(CGI)、个人和社会功能量表(PSP)、世界卫
混凝土重力坝坝体内部电梯井因使用需要往往体型复杂,小结构多,为保证施工质量及施工进度,对整体井筒体型简单部位采用滑模施工。为便于滑模施工,内部小结构采用预制或钢结构
目的运用系统评价的方法评估针灸治疗急性结膜炎的有效性和安全性,为针灸疗法治疗急性结膜炎的临床应用提供证据,为今后的临床研究指出方向或提供思路。方法制定严格的文献纳