基于深度强化学习的车联网频谱分配算法研究

来源 :云南大学 | 被引量 : 0次 | 上传用户:wearetian
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着全球汽车工业智能化和网络化的快速发展,车联网业务作为一种关键的通信技术,面临着频谱资源日益短缺的问题。有限的频谱资源作为各类无线通信的载体,如果不能得到充分的利用,无疑会造成极大的浪费。而机器学习尤其是强化学习的出现,为在高动态复杂环境下的车联网频谱资源分配提供了一种有效的方法。在本文中,主要工作如下:(1)本文针对多蜂窝用户(Cellular Users,CU)和设备到设备(Device to Device,D2D)用户共存的单天线车载通信网络频谱配置问题,提出一种复杂动态环境中具有延迟约束的业务感知频谱访问机制。以实现车辆到车辆(Vehicle to Vehicle,V2V)和车辆到基础设施(Vehicle to Infrastructure,V2I)链路总容量最大化与链路干扰最小化的动态平衡为目标,提出了一种基于轻量化深度强化学习的区分优先级频谱分配方案。在一组公共带宽上使用深度Q-学习网络(Deep Q-learning Network,DQN)训练所提出的算法。仿真结果表明,该方案能在高动态车联网环境下快速有效地分配频谱资源,提高信道传输速率,实现业务优先级区分,对通信噪声具有良好的鲁棒性。(2)为进一步适应网络边缘设备的轻量化学习,本文引入了二值化和长短期记忆(Long Short-Term Memory,LSTM)网络,通过二值化进一步对数据进行压缩,通过LSTM网络来对数据进行预测。两者通过对数据的进一步处理,既可以简化网络运算复杂度又可以提升系统总体性能。根据所提出的四种不同方案,通过实验验证,对DNN输出数据先进行二值化后利用分布式LSTM网络进行数据预测后输入到DQN进行强化学习过程的方案能获得最好的性能,能有效进行频谱资源的合理利用,同时对通信噪声具有良好的鲁棒性。
其他文献
相控阵天线可以通过控制辐射单元的电流来改变远场方向图,但是因为相控阵天线大量使用移相器,导致天线成本和功耗大大增加。无需移相器即可进行波束方向变换的电控无源阵列天线(ESPAR)可以降低硬件成本和功耗,因而它在移动通信中具有潜在用途。ESPAR阵列天线的三个重要研究方向分别是增加天线带宽、增加抑制旁瓣和副瓣的能力、波束赋形。本文的研究方向为阻抗带宽的增加。本文研究内容主要包含以下三个方面:第一、针
学位
无线电频谱资源随着无线电技术的快速发展其应用范围日益增大,有限频谱资源也需要合理使用减少浪费,频谱管理对于规范频谱使用、减少无线电干扰和增加频谱利用率等方面起到重要作用。无线电频率占用度分析作为频谱管理中的一个重要组成。无线电频率占用度分析主要依靠人的经验,而且分析工作因为无线电业务数量多、监测数据数据量大和频谱跨度长等特点,导致分析时间长步骤繁琐,分析结果主要根据工作人员的主观判断,可重复性差,
学位
自从上个世纪80年代后期英国数学家Matthews介绍了“混沌密码”的概念后,许多研究已经证实,混沌技术在网络空间安全方面具有巨大的潜力。由于混沌系统的初值敏感性、拓扑传递性、非周期性和轨道稠密等良好统计特性可以有效地提高加密系统的性能。因此,基于混沌系统的研究受到了许多研究者的关注,尤其在图像加密方面与混沌系统的结合受到众多研究者的青睐。然而,现有的许多混沌系统参数空间相对狭窄,不能生成随机性强
学位
大学教学文化是高等教育质量建设的核心,大学教师的发展则是质量建设的基础。教师队伍的建设关系到高等教育质量建设,当前对大学教师发展的关注日益升温,在着力建设一流本科的新形势下,教师发展成为了高等教育领域改革的重要议题。教师和学生是大学教学的两大主体,教师发展的水平有赖于教师和学生的共同努力,学生参与作为保障大学教师发展质量的一种方式,已成为国内外大学的普遍选择。近十余年来,西方高等教育领域学者们开始
学位
公司风险投资(CVC)是实体企业以设立或参与风险投资的形式对新创企业进行投资的一种组织形式。与纯粹的金融机构独立风险投资(IVC)不同,由于存在经营实业经济的母公司,CVC在进行股权投资时并非单纯地追求财务收益,还会对母公司的战略意图有所考量。以往研究认为,CVC是成熟企业面向技术变革和市场变化开启的一扇窗口,有助于帮助其克服大企业的惰性。因此,母公司设立或参与CVC最为重要的战略意图是进行体外远
学位
随着全球经济融合步伐的加快以及国际关系的改革深化,国际间资本要素流动更加频繁,对外直接投资对世界经济、对外贸易的影响和推动力越来越突出,发达国家在积极开展对外直接投资活动以占据国际市场,与此同时我国对外直接投资也进入了飞速发展的阶段。探究企业对外直接投资的区位选择问题已成为当下讨论的热门话题,但迄今为止,学术界仍未形成一般性的投资区位选择理论,目前学者们普遍认可的影响因素包括制度性和非制度性因素。
学位
王亚南是我国著名的经济学家、教育家,被誉为“共和国老一辈教育家”。在我国正处于新中国成立初期的阶段,王亚南以厦大校长的身份主导厦门大学的教育改革,以此适应新时代的发展潮流,为中国培养各界人才奠定了基石。本研究期望通过呈现王亚南校长的教育思想及其在厦门大学的教育实践活动,丰富厦门大学的校史研究,进一步丰富和充实中国教育史、中国高等教育史研究。本研究采用文献研究法和历史考察法,遵循逻辑与历史相统一的原
学位
自经济全球化以来,世界经济迅猛发展,但红利不仅并未惠及四方且发展的差距却进一步加剧。联合国敏感地意识到了这一问题,呼吁发展成果由各方共享。千年发展大会上,各国首脑达成共识,力争通过援助推进落后国家经济增长,消除不平等。从此,各方开始越来越多地关注国际援助。《巴黎宣言》、《阿拉克行动议程》以及《釜山宣言》等相继被签署,各个援助主体不断地进行实践摸索,越来越关注援助有效性甚至是由此而来的发展有效性。近
学位
肺动脉高压的主要特征是肺动脉压力增高,严重时会引起多种并发症。左向右分流型先心病是肺动脉高压的诱因之一,若不及时发现并治疗可能导致不可逆转的艾森曼格综合征。先心病相关肺动脉高压是血流动力异常现象,而心音与心脏的机械运动以及血流的相互作用有关。故通过研究心音信号诊断先心病相关肺动脉高压切实可行。本文研究目的是在识别出先心病的基础上进一步判断是否为肺动脉高压,进而实现一套先心病相关肺动脉高压的心音信号
学位
长期以来,高等教育学硕士生教育秉持着培养理论人才的初衷,为我国高等教育研究事业提供了丰富的人才储备。然而,表面繁荣的背后也蕴藏着质量危机,且往往以严峻的就业形势为表征,深刻折射出偏重学术型的培养模式与社会多样需求的“不适应性”。为此,高等教育学硕士生教育亟需承担起培养学术型人才和应用型人才的双重使命,这本质上提出了分类培养的吁求。而课程体系作为人才培养的核心环节,是分类培养从理念转化为实践的主要载
学位