基于深度强化学习的网络切片资源分配问题研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:xiaosa12
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
网络切片作为5G的关键技术,是一种按需组网的方式。网络切片通过逻辑和物理资源的分离,支持在公共物理网络的基础设施上进行服务定制与隔离。网络切片借助网络功能虚拟化和软件定义网络共同提供的虚拟化与软件化完成设计、实施、部署、管理和维护,从而支持5G网络的快速发展与更广阔的应用。网络切片可以按照底层网络结构与功能的不同分为接入网切片与核心网切片,他们共同组成了端到端网络切片从而为用户提供端到端的网络切片服务。本文分别对接入网切片与核心网切片的资源分配问题展开研究。第一,本文研究了接入网中超密集网络的网络切片资源分配问题,并提出使用基于注意力机制与多智能体合作机制的MA3C算法为切片的用户做基站接入决策。本文发现通过向MA3C算法输入部分切片的移动用户的历史轨迹以及所有切片的用户的历史流量信息,可以解决这个问题中的网络能耗问题与部分切片的移动用户基站频繁切换问题。实验结果表明,MA3C算法可以在网络能耗开销、部分切片的移动用户的基站切换惩罚和违反约束惩罚等方面较对比算法有着更为优异的性能,同时在算法运行时间以及鲁棒性上也有着理想的表现。第二,本文研究了核心网中动态多租户网络的网络切片资源分配问题,并提出使用深度强化学习算法为低优先级租户服务的用户做网络切片部署。本文发现通过向深度强化学习算法输入网络资源的历史信息与用户流量的历史信息可以使其做出长期奖励更高的网络切片部署决策。同时结合问题中网络资源与用户流量大小对奖励范围影响较大的背景,发现Dueling-DQN算法适用于此问题场景,并提出了应对过大动作空间时的解决方案。测试结果表明Dueling-DQN可以在网络系统的能耗开销、算法运行时间等方面较对比算法有着更为优异的性能。同时其也具有较好的鲁棒性。
其他文献
自我革命是中国共产党百年永葆青春活力的基因密码。习近平总书记关于党的自我革命重要论述,揭示了百年大党风华正茂的奥秘,为解决党长期执政面临的重大时代课题、加强党的建设明确了方向和要求。自我革命是对党的本质属性的诠释、对党的初心使命的坚守、对党自身建设的强化,是党跳出历史周期率的“第二个答案”。自我革命的动力是蕴含目标引领力、内生驱动力、价值支撑力和挑战回应力的整体性动力体系。新时代推进党的自我革命,
企业生存延续的重要前提就是不断盈利、获取利润。可以说,盈利能力是企业实现经营目标的关键指标。当前,随着党和国家对医药行业的不断重视,健康中国的理念也愈发深入人心。因此,我国医药行业迎来了重大发展机遇,但同时也有许多实力雄厚的公司加入了国内的医药战场,这就导致盈利能力越发关键。针对本文研究对象,即新疆TJT,该公司在盈利能力方面依然存在着营业利润率较低、成本费用相对过高、研发投入费用较少、企业闲置资
<正>老年人是急性心力衰竭的主要患病群体,临床以强心、利尿等常规对症治疗为主。有研究表明,有效的护理干预可以提高患者预后和生活质量。本文探讨延续护理干预在急性心力衰竭患者中的应用价值,现将结果报告如下。1资料与方法1.1临床资料选取2018—2019年我院收治的急性心力衰竭患者80例,均具有配合能力、可参与随访,且经本院伦理委员会批准;排除严重心肝肾功能不全和失访患者。将其按护理方案不同分为对照组
期刊
近年来国内智慧教室逐渐兴起,智慧教室主要是利用技术促进课堂中的互动行为,从而提高学生的学习效果。相对于“计算机+投影仪”的单一多媒体形式的常规课堂,智慧教室融入了更多的新型信息技术,具备多样的数字资源,互动形式也更加丰富,课堂教学互动呈现出复杂多元的发展趋势。目前智慧教室在小学中的应用处于初期阶段,智慧教室环境下的小学课堂教学互动等问题有待深入研究。首先,本文在分析国内外课堂教学互动行为分析系统和
研究目的:全髋关节置换术(THA)在应用于老年股骨颈骨折方面,其长期疗效受到了广泛认可。目前相关领域就该手术过程中对患者关节囊及后方结构的修复必要性,相关专家学者已经基本达成共识。但目前就后方结构修复方式仍存在分歧。文献报道来看,后方结构的修复方式主要有骨性修复、软性修复及锚钉修复,由于锚钉修复成本较高,该技术不作为常规修复方式。本论文就股骨颈骨折患者THA术后后方结构骨性修复是否较软性修复有效降
总结1例左心房巨大球形血栓阻塞二尖瓣口导致急性左心衰竭患者围手术期的护理经验。护理要点包括迅速完善术前准备、启动心脏专库应急团队、做好设备和物品准备;术中快速建立体外循环、加强血液管理、分阶段进行体温管理、积极进行血糖管理、采取集束化手术感染管理;术后并发症的管理和心理护理。经过多学科的救治及精心的护理,患者手术顺利,术后恢复良好,27 d后出院。
本文从山东省农村普惠金融机构支农能力建设现状入手,剖析了现阶段支农能力建设中存在的主要问题,从政府、金融机构、农民三方参与主体角度提出了建构并完善山东省农村普惠金融机构支农能力建设的战略对策,以期对解决支农能力建设中存在的信息不对称、服务成本相对较高等一系列问题提供参考价值。
肺结节作为肺癌的初期表现,及时的发现和准确的良恶性诊断对于疾病的治疗具有重要的意义。为了提高肺部CT图像中肺结节良恶性的诊断率,提出一种基于3D ResNet的卷积神经网络,并通过加入解剖学注意力模块有效地提高了肺结节良恶性的分类精度。此外,该方法通过自动分割以获取注意力机制所需的感兴趣区域,实现整个流程的全自动化。解剖学注意力的添加能更好地捕捉图像中的局部纹理信息,进一步提取对于肺结节良恶性诊断
房屋建筑施工中,防渗漏技术应用是非常关键的。如果施工中未对防渗漏技术进行全面有效应用,就会降低和影响房屋建筑工程整体的质量,造成房屋建筑在使用过程中存在渗漏问题,给用户造成严重困扰,同时也会缩短房屋建筑寿命。在房屋施工中,需要对屋面采用必要的防渗漏技术,提高屋面建筑结构的防渗性能。
任务型教学法是一种高效的教学方法,坚持任务导向来支持学生主动学习,在学习过程中不断内化知识结构,锻炼学生的学习能力和逻辑能力,养成良好的学科素养。鉴于此,高中英语教学中需要英语教师强化自身引导作用,突出学生主体地位,因材施教,整合教学内容通过布置任务的形式进行教学,不仅可以赋予高中英语课堂新的活力,还可以促进学生素质能力向着高水平方向发展。