基于解耦型MADDPG的无人机集群自主跟踪与避障

来源 :飞行力学 | 被引量 : 0次 | 上传用户:mathsboy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
考虑单无人机在复杂空域环境下对地面动目标执行跟踪任务的局限性,采用多智能体深度强化学习(MADRL)方法对无人机集群目标自主跟踪问题进行了研究。首先,基于随机博弈过程设计联合状态空间、动作空间和奖惩机制,并由此建立了无人机集群三维自主机动模型。其次,考虑MADRL的稀疏回报问题,设计了引导型奖励函数,增强了算法收敛性能。接着,为提高集群学习效率,设计了相应的解耦型奖励函数和神经网络结构,并采用解耦型多智能体深度确定性策略梯度(MADDPG)算法对模型进行自适应训练,以生成无人机集群自主跟踪与避障最优机动策略。最后,开展了仿真验证。结果表明:基于MADRL方法的无人机集群能更好地满足复杂空域环境下目标跟踪任务的需求;相比于MADDPG,解耦型MADDPG算法具有更强的准确性和实时性。
其他文献
目前,桩基工程在建筑工程、道路桥梁、港口航道等领域都有广泛的应用。随着我国经济的发展,基础设施建设的需求也日益提高。我国冻土地区分布广泛,对冻土地区的桩-土-承台结构之间的动力响应问题将给桩基工程的抗震设计,桩基动力检测和动力沉桩分析提供重要的参考价值,具有十分重要的意义,值得深入研究。本论文围绕这一科学问题进行了如下的研究工作:(1)基于Leclaire(1994)提出的冻结饱和多孔介质,建立单
学位
18世纪60年代以来,全球温室气体浓度不断上升,加速了全球变暖的步伐,增大极端天气出现的概率,成为世界可持续发展道路上的障碍。我国作为负责任的大国,向全世界做出了 2020年碳排放强度要比2005年下降40%—45%的庄严承诺。目前,我国农业温室气体排放量不断增加,已经排在了全国温室气体众多源头中的第二位,而种植业碳排放对农业碳排放影响最大,因此要高度重视种植业碳排放在温室气体排放中的作用。陕西省
学位
船舶推进轴系是维持船舶正常航行的重要部件。随着船舶大型化发展,轴系轴承承受更大载荷,更易处于恶劣工作环境,增加轴系处于异常运行状态易而产生磨损概率,影响船舶正常行驶,甚至严重减少船舶寿命。近些年来新造船舶产生轴系异常磨损现象引起行业内人员广泛关注,特别是从数学模型理论上去研究船舶推进轴系异常磨损机理。论文以船舶推进轴系为对象,建立适用于动态条件下的船舶推进轴系运动学模型,通过输入实船数据进行仿真计
学位
<正>阳春三月,和顺县纪委监委以庆祝“三八”国际妇女节为契机,组织女干部职工开展“树清廉家风建廉洁家庭创清廉机关”系列活动,用清廉浸润家风,提高团队凝聚力。走清廉之路,擦亮党建底色。“路虽远,行则将至;事虽难,做则必成。”在县云龙山健身步道上,县纪委监委机关女干部职工们高举“机关党总支”旗帜,以饱满的热情阔步前行,
期刊
随着信息化时代的不断发展,行政事业单位财政一体化系统得到了广泛的应用,财务会计对信息系统的依赖程度越来越高,在这种趋势下,对财务工作提出了更高的要求。传统的财务会计已不能满足发展要求,需重视财务会计向管理会计的转型发展。本文通过分析财政一体化的内涵和成效、转型的意义和必要性以及当前面临的问题,进而提出了有效的应对策略。
期刊
近义副词词义、用法相似,辨析困难,学习者容易出现偏误,因此成为副词教学的重中之重。本文选取在日常生活中使用频率较高的范围副词“凡”、“凡是”和“但凡”作为研究对象,从语义、句法、语用三个平面展开分析,然后对汉语学习者在习得这三个范围副词过程中出现的偏误进行归类总结并分析偏误成因,最后以本体研究作为出发点并结合偏误分析对教材编写和教学方法提出建议。本文的主要研究内容分为以下四个部分:绪论部分,主要论
学位
吸入麻醉是小动物临床上最常见的麻醉方式,为了达到理想的麻醉效果,通常需要加大单一用药的剂量,并且镇痛效果不佳,同时也增加了心血管系统发生抑制的风险。在骨关节手术中,疼痛显著,麻醉时间较长,动物麻醉风险高。由于国内兽医临床中很多镇痛药物的限制缺乏,为了降低动物手术过程的不适,降低麻醉风险,更加符合动物福利要求,兽医临床中多模式镇痛不断发展,近年来应用利多卡因恒速静脉输注(CRI)镇痛已得到更多的关注
学位
桑叶中富含蛋白质和矿物元素,可作为饲料的替代品使用。研究探讨桑叶作为饲料对缓解粮食短缺问题具有重要意义。
期刊
十二指肠贾第虫(Giardia duodenalis)是一种非侵入性原生动物寄生虫,它能感染人和多种哺乳动物并引起宿主腹痛、腹泻和吸收不良等症状。自噬是一种细胞分解代谢过程,负责消化细胞质内受损的细胞器、蛋白质和脂质,然后通过溶酶体将它们清除。这一过程对细胞生存和病原感染至关重要。已有研究证明自噬参与调控了寄生虫对宿主细胞紧密连接蛋白的破坏,以及自噬参与调控了细胞中与寄生虫感染密切相关的一氧化氮(
学位
<正>1母、父本群的筛选都说“好葫芦锯好瓢,好种出好苗”,人工育王也是这样。移虫从哪一箱“移”,要经过精心筛选,如何筛选?这是要有依据的。遗传的种性特性优异是硬指标,其优秀性状有哪些突出表现?首先是其“生产能力”,这关乎饲养目的和意义,最典型的表现是采集力———在同等的蜜源条件下,所饲养的蜂群的蜂产品产量上不去,还有什么饲养价值?
期刊