基于强化学习的MAC协议与跨层设计研究

来源 :厦门大学 | 被引量 : 0次 | 上传用户:dong0003060
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
海洋面积占地球表面积的71%,是我们人类活动的重要领域之一。随着科学技术的不断发展,现代通信系统和网络已经从空中和陆地延伸到了海洋。因此水声通信技术近年来得到了迅猛的发展。水声通信的研究在海洋资源勘探和开发、海洋环境监测以及海洋军事战略发展中也起到了至关重要的作用,而水声传感器网络中数据的可靠传输显得尤为关键。水声信道与无线信道不同,它具有可用频带窄、传播时延高、多径效应严重和多普勒频移大等的特点。因此陆地无线网络的数据传输协议并不适用于水下通信,我们需要设计新的介质接入控制(Medium Access Control,MAC)协议来实现水下通信数据的可靠传输,同时增大水声传感器网络的吞吐量、减少端到端时延和减少丢包率等。本文的主要工作内容和创新点如下:1、针对水下通信数据包传输产生的严重碰撞问题,本文提出了一种适用于水声传感器网络(Underwater Acoustic Sensor Networks,UASNs)的簇内数据传输协议:基于强化学习(Reinforcement Learning)的MAC(RLM)协议,RLM协议使用改进的时隙帧结构,并通过强化学习策略对水声传感器网络进行学习。每个传感器节点根据本地的Q值表来进行数据传输,然后根据数据传输状态更新Q值表。经过多次学习,网络达到收敛状态,每个传感器节点都会选择相对的最佳数据发送时隙,从而大大减少了由于数据包之间的碰撞产生的丢包,提高网络的性能。同时为RLM协议增加节点状态判断机制,使得RLM协议对网络拓扑结构的变化也有较好的自适应性。最后通过仿真,分析该算法的性能。2、针对由于水声信道环境恶劣导致的水下通信丢包问题,本文引入了跨层设计,将物理层与MAC层联合,构建PHY/MAC跨层模型。通过各层相关参数的共享,由系统整体进行相关信息参数的统一调度,以此达到优化网络系统性能的目的。物理层采用分数阶傅里叶变换(FrFT)对接收到的信号进行同步检测,判断数据帧的状态及其丢包原因。根据信道状态信息对数据帧实现自适应调制或者调整信号发送速率,而MAC层根据数据包状态选择调整发送时间片段或者调整数据帧长等,保证更为可靠的数据传输。3、在OPNET平台上实现PHY/MAC联合模型,并分析跨层方案的网络性能。仿真结果表明,PHY/MAC跨层设计可以大大提高网络吞吐量和减少丢包率。
其他文献
物联网中小型传感通信设备的可持续能源供给是一个重要的问题。无线数据与能量协同传输能(SWIPT)提出可以通过同一信号载体实现信息和能量同时传输,因此可以依托广泛分布的无线通信设备和基础设施构建覆盖面广、成本低的无线能量供给网络。混合信号体制下的SWIPT系统是一种混合了高功率窄带的能量信号和低功率宽带的信息信号的系统,具有传能范围广泛的优点。“同频”混合信号体制下SWIPT系统具有非线性失真和不兼
随着汽车售后服务市场利润空间的扩张以及竞争日趋激烈,汽车厂商越来越重视对经销商售后服务经营活动的管理。由于大型汽车主机厂在全国的经销商数目众多且经营的业务繁杂,通过人工分析经销商数据以发现经营问题的方式不仅耗时耗力,而且往往会由于人为因素而导致经销商业务问题无法及时被发现。因此,研究开发一个适用于汽车企业的售后服务经营数据预警系统对于汽车企业及管理人员来说具有极大的现实意义及价值。本文从汽车企业的
[目的]切缘质量被认为是早期非小细胞肺癌行亚肺叶切除后局部复发的重要因素之一。阴性切缘是保证肿瘤完整切除的最重要指标。在对早期≤2cm非小细胞肺癌实施亚肺叶切除时,一方面要保证足够的切缘距离以获得阴性切缘,另一方面需要尽量保留正常肺组织以保护肺功能。本研究首次采用早期非小细胞肺癌不同距离癌旁组织的病理镜下情况,旨在探索获得阴性切缘的切缘距离临界值,为临床实施亚肺叶切除时把握安全切缘的同时保护正常肺
近年来随着可持续发展观念的深入人心,对提高能源利用效率和开发可再生能源显得越发重要。在这样的背景下,有机固液型相变材料因其清洁,低廉,良好的热循环性能和高储能密度而引起了各界的广泛关注,尤其是在蓄热、废热能回收利用和温度控制领域,并且在过去的几十年中发展迅速。然而在实际的应用中,固液转变型相变材料在熔化过程中存在易于泄漏、体积变化大等问题,极大的限制了其应用范围。为了解决实际应用中的问题,通过将相
保险是现代经济的重要产业,是风险管理的重要手段,对于促进经济提质增效、改善社会治理方式、保障社会稳定等方面具有十分重要的意义,被称为“社会稳定器”和“经济助推器”。新时代下,互联网快速普及,全球数字经济爆发式增长,信息科技与保险业迅速融合,“互联网+”使保险市场焕发出新的活力,呈现出前所未有的生机。商业保险监管是金融监管的重要组成部分。我国自2003年确立“一行三会”的格局以来,一直施行金融领域分
当前,险资在资本市场中扮演着越来越重要的角色,那么保险公司持股对上市公司会造成什么影响?本文从现金股利的角度进行研究。以2006-2018年期间沪深两市A股上市公司为基础研究样本,利用国泰安(CSMAR)及锐思(RESSET)数据库,实证检验保险公司持股对上市公司现金股利的影响,讨论下述问题:(1)保险公司持股行为与上市公司的现金股利发放方面是否存在一定的相关关系;(2)进一步细分保险公司类型,讨
作为一种新型人机一体化装置,可穿戴型下肢外骨骼将机器人的强大机械动力与人的智力相结合,在增强人体机能的同时还能额外为身体提供动力。凭借着优越的辅助特性,下肢外骨骼在医疗、军事等领域有着广泛的应用,成为近年来机器人领域的研究热点。本文以被动模式下肢外骨骼系统作为研究对象,在分析人体下肢机理与步行模式的基础上,围绕系统结构设计及被动模式时外骨骼的运动特点,重点展开步态规划与轨迹控制方面的研究。研究的主
目的:砷(Arsenic,As)是一种公认的致癌物质,但砷的致病机制尚不清楚。上皮间质转化(Epithelial mesenchymal transition,EMT)是癌症进展过程中的关键形态学事件,本研究通过亚砷酸钠(NaAsO2)慢性诱导人支气管上皮细胞BEAS-2B发生EMT,探讨自噬对细胞发生EMT的作用机制,为砷相关疾病的预防和治疗提供实验依据。方法:1.细胞分组。急性砷处理组:BEA
近年来,随着中国逐步进入老龄化社会,我国在老年人养老机制及老年人护理方面面临诸多挑战,养老方面的国际合作显得越来越重要。在此背景下,成都温江澄源堂中医馆与意大利的圣埃及地奥社区进行了“康乐未央”项目的合作。该项目于2019年7月15日在澄园书画艺术博物馆举行了开幕仪式暨签约仪式,笔者担任本次活动的交替口译员。本次口译实践涉及到中意两国之间的政治、经济和文化等不同方面的内容。笔者在做交替传译的过程中
科尔森·怀特黑德是著名的非裔美国作家。他的最新力作《地下铁道》(2016)曾获2016年美国国家图书奖和2017年普利策小说奖。以往对该小说的研究主要集中在文本的叙事策略和关于成长、创伤、自由、身份等主题之上。本文基于扬·阿斯曼的文化记忆理论研究《地下铁道》,将小说还原到怀特黑德创作的文化语境和历史语境中,关注那些被隐藏在记忆碎片中的文化记忆,如地下铁道、博物馆、图书馆,探讨奴隶制下文化记忆在非裔