基于强化学习的飞行自组网路由协议研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:gaoyeye
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着无人机成本降低以及飞控技术的不断成熟,无人机在各个领域得到了广泛的应用。为构建一个稳定无人机集群系统,搭建一个可靠的低时延的多无人机通信网络是必不可少的过程。本文重点关注无人机自组网(Flying Ad Hoc Networks,FANETs)中路由协议的研究,引入强化学习思想,设计出一种智能链路探测技术和一种智能路由协议。首先,本文针对无人机节点高速移动带来的拓扑变化和链路维护困难所造成的网络性能下降的问题,提出一种基于强化学习的自适应链路探测优化算法。节点通过感知动态环境下邻居数量变化程度和自身业务负载程度,构建回报函数,求解最优HELLO时隙,以提高节点链路发现与维护能力。并且,针对构建强化学习模型过程中,遇到的连续状态空间导致状态过多的问题,采用基于相似度机制的Kanerva编码函数逼近状态空间,降低算法的复杂度,增加算法的稳定性。仿真实验表明,该算法能够有效提升网络的吞吐量,降低路由开销,且具有自学习的特性,适用于高动态环境下的无人机集群组网。最后,本文分析了已有路由协议应用于FANETs存在的不足,结合强化学习试错和动态规划的思想,提出一种基于地理位置信息的多智能体路由协议。在该协议中,节点评估邻居节点的价值,在数据包转发时通过衡量邻居价值和与目的节点距离的权重的关系来指导路由选择。实验表明,相较于其他基于地理位置的路由协议,该协议降低了开销、时延,提高了吞吐量。在网络负载高时,均衡链路负载,减少网络拥塞。
其他文献
量子信息学是近几十年发展起来的新型交叉学科,是量子物理学与计算机科学、信息科学相结合的新兴研究领域,它主要包括量子通信和量子计算两个部分。近年来,量子信息学在理论和实验上都取得了重大的突破。量子通信利用量子信道传递经典或者量子信息,其主要优点是能在合法的通信者之间实现无条件的绝对安全通信。量子通信在军事国防、金融保密等领域具有很好的应用前景,主要的量子通信方案有量子密钥分发、量子秘密共享、量子安全
气动系统作为生产自动化的重要手段之一,被广泛运用于各大生产车间,但其能量利用率比电气系统和液压系统低,气动系统仍然具有很大的节能空间。在气动系统中,压缩空气在做完功后通常未经任何处理就排空,造成了能量的浪费,传统的排气回收方法会产生背压,影响气动系统的正常工作,而采用基于压电效应的能量回收装置对系统影响较小,而且具有结构简单、能量转换率高、无污染等优点。利用压电俘能器对流体能量俘获已经成为了研究的
干衣机或洗干一体机在家庭、宾馆和酒店行业中的应用有着逐步扩大的趋势,到了一定阶段,其在城市家庭中的应用率可能会与洗衣机、冰箱等常用家电的应用率大致相当,可见干衣机具有相当可观的需求量。但是干衣机或洗干一体机工作时,不同材料的流道对温度的耐受性不同,流道的结构和干衣机的运行模式都会影响干衣的效果,因此干衣机或洗干一体机在研发过程中,需要进行必要的研究和测试。为了满足干衣机或洗干一体机研发测试的需求而
飞行安全一直以来都是备受关注的一个话题,航迹信息的获取对保障飞行安全至关重要。广播式自动相关监视信号(Automatic Dependent Surveillance-Broadcast,ADSB)是新一代飞行器监控技术,国际航空组织已将其称为下一代航空监视技术。论文首先介绍了课题的研究背景和研究意义,对ADS-B技术在国内外的发展情况以及ADS-B接收机的研究情况做了分析介绍。提出使用软件无线电
随着智慧城市概念的提出,智慧地铁呼之欲出。在这个互联网、人工智能、大数据飞速发展的时代,如何将新兴技术应用到地铁交通中,已经成为业界人士关注的重点。语音识别目前是这些技术中较为成熟的技术之一,智能语音走进地铁已经在很多城市达成共识。基于现阶段地铁车站发展的实际情况,将语音识别技术应用到地铁自动售票机(Ticket Vending Machine,TVM)是最实际、最理想的方案。自动售票机作为地铁车
三维人体形状和姿态估计是计算机视觉领域研究人体行为的重要方式。近年来,随着深度学习和计算机视觉的不断融合,基于深度学习的三维人体姿态估计方法也得到了广泛的关注与研究。三维人体姿态估计主要研究根据输入图片估计出对应人体姿态,尽管目前三维人体姿态估计方法已经取得了长足的进步,但其仍面临着一些严峻的挑战。首先,目前大多数三维人体姿态估计方法都使用RGB图像作为输入,但由于RGB图像缺少空间信息,导致从R
21世纪以来,饲料工业迅速发展,同时随着德国工业4.0和中国制造2025战略的提出,智能制造成为时代主流,中国励志从制造大国转变为制造强国,鼓励企业建设智能化工厂,推动企业升级转型。饲料工业作为国民制造业的重点对象,要求饲料工厂和机械设备朝着自动化和智能化的方向发展。基于上述背景,本文依托江苏省基础研究计划,对饲料挤压膨化设备-双螺杆挤压膨化机进行控制系统的研究设计,该控制系统可以实时监控膨化机的
火箭武器系统在发射过程中会产生高温高速的燃气射流,该燃气射流的瞬时冲击力和高温会对定向管造成冲击和烧蚀,导致定向管的材料特性发生变化。环氧玻璃钢复合材料由于其优异的性能成为了制造定向管的首要选择,为了研究燃气射流对环氧玻璃钢定向管性能的影响,本文以某型号火箭炮的环氧玻璃钢定向管为研究对象,对其在燃气射流作用下的热稳定性及力学性能变化开展了研究。首先通过热重分析法及热重-红外联用技术对环氧玻璃钢复合
导电银浆因良好的导电性能和低的烧结温度成为电子产品导电线路成形的理想材料,在三维结构电子、柔性电子、印刷电子等领域已进行初步尝试,显示出巨大潜能和广阔的商业化应用前景。但目前导电银浆的热烧结工艺,存在烧结温度受基体限制、烧结效率低等问题,为此本文采用激光束快速烧结成形导电线路,并针对导电线路性能开展深入研究,主要包括以下几点:(1)通过全因子试验对激光烧结导电银浆成形导电线路性能进行系统研究。阐明
激光粉末床熔融(LPBF)构件的质量很大程度上取决于打印过程中可能出现的各种缺陷。本文通过数值模拟和实验研究了高强铝合金Al2024在LPBF期间复杂的热流传输与缺陷演化现象。开发了一个基于离散粉末的多物理场数值模型获得了激光移动过程中的熔池特性、热循环等关键冶金变量。同时通过实验制备了单熔道、多熔道以及多层试样,验证了模拟结果并进一步研究了裂纹特征。首先发现了两种类型的熔道间孔隙。根据其形成机制