基于改进深度强化学习的边缘计算服务卸载算法

来源 :计算机应用 | 被引量 : 0次 | 上传用户:jyc894784116
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在边缘计算网络中,针对边缘节点计算资源和存储空间有限的问题,提出了一种基于改进深度强化学习(DRL)的边缘计算服务卸载(ECSO)算法,以降低节点处理时延和提高服务性能。具体来说,将边缘节点服务卸载问题转化为资源受限的马尔可夫决策过程(MDP),由于边缘节点的请求状态转移概率难以精确预测,因此利用DRL算法来解决此问题;考虑到边缘节点执行缓存服务的状态动作空间过大,通过定义新的动作行为替代原有动作,并依据提出的动作筛选算法得到最优动作集合,以改进计算动作行为奖励值的过程,进而大幅度降低动作空间大小,提高算法训练的效率以及收益。仿真实验结果表明,对比原深度Q网络(DQN)算法、邻近策略优化(PPO)算法以及传统最流行算法(MP)算法,ECSO算法总奖励值分别提升了7%、12.6%和39.6%,边缘节点服务卸载时延分别降低了13%、18.8%和39.9%,验证了算法优化的有效性,有效提升了边缘计算服务卸载性能。
其他文献
以某管桩厂现用C80免压蒸管桩混凝土配合比为基准,研究了同一水胶比时不同矿渣粉掺量与混凝土抗压强度之间的关系;在同一水胶比及最优矿渣粉掺量的前提下,设计出4组不同浆骨比的配合比,研究了不同浆骨比规定坍落度下拌合物的黏性系数及硬化后的混凝土力学性能。结果表明:在水胶比0.26、矿渣粉掺量30%的前提下,浆骨比为0.42时,C80免压蒸管桩混凝土配合比性能最优。
目的 评价床旁超声监测和注射器回抽法对肠内营养的实施效果。方法 检索中国知网、万方、PubMed、Cochrane Library等中英文数据库自建库至2020年10月28日公开发表的有关床旁超声监测和注射器回抽法对肠内营养实施效果的随机对照试验(RCT)或队列研究。实验组采用床旁超声监测,对照组采用注射器回抽法。由两名研究员依据纳入和排除标准进行文献筛选,评价纳入文献的质量并提取资料,使用Rev
目的:ICU(Intensive care unit)中呼吸衰竭患者,若呼吸衰竭程度已达到有创机械通气指征,应尽早实施气管内插管有创机械通气,待患者病情稳定并通过自主呼吸实验后,应尽早拔除气管内插管。ICU中存在部分即使已通过一次或多次自主呼吸试验仍然出现拔管失败的患者,这类患者即为机械通气拔管失败高风险患者。为降低该类患者拔管失败风险,本文将探究HFNC(High-flow nasal cann
拙文《抗战胜利后台湾行政长官公署的设立与撤销》(与陈红民教授合作发表,以下该文简称“拙文”)在《史学月刊》2020年第12期发表。文章运用新的档案史料,将一段史实经纬梳理得较清晰,获得学界部分朋友的称许。有位台湾学人阅读此文后,特意联络笔者,称台北“档案管理局”刚开放的新史料中,有些涉及台湾行政长官公署存废内容,并愿意提供。写作“拙文”时,主要运用的是“国史馆”的档案与《蒋介石日记》。既然有新档案
期刊
从现有水利工程项目的施工经验来看,做好基坑排水施工对于保障施工顺利进行具有重要意义。在本次研究中将采用案例分析法,在了解水利工程项目实际情况的基础上,对基坑排水施工技术的施工工艺展开分析,包括施工准备、施工技术要求等,并对基坑排水施工的施工质量管理方案展开讨论。根据案例水利工程项目的施工经验可知,该项目中所采取的基坑排水施工技术具有可行性,值得推广。
为充分适应小学英语教学场景,改善小学英语教学质量,需要合理引入智慧技术,重点关注学生的学习、成长过程,充分化解传统小学英语教学互动性不足、教学形态单一等问题,促进小学英语教学体系实现智慧升级。本文将结合《小学英语课程体系整体创新的实践与探索》一书,分析信息技术环境下小学英语教学的现状及问题,探索以信息技术为基础,创新小学英语教学的实践路径,以期为当前促进小学英语教学高质量发展提供有效参考。
期刊
监控理论是美国著名语言学家克拉申提出的语言习得理论。习得与学习假说、自然顺序假说、监控假说、输入假说、情感过滤假说是克拉申监控理论的五个组成部分,它对于人们进行可理解的语言输入教学来提高教学效果有益。本文结合人教版八年级上册第一单元课程为例,仔细论述监控理论如何运用到如今的英语课堂。
脂肪肉瘤是一种比较少见的软组织肉瘤,主要表现为无痛性肿块,生长缓慢,病程可长达数年,它们约占所有恶性软组织肿瘤的16%~18%。脂肪肉瘤通常见于成人,儿童很少发生。大约90%~95%的肿瘤发生在躯干、四肢或腹膜后,6%发生在头部和颈部区域,胸内起源的脂肪肉瘤很少见,占2.7%[1]。当胸腔内发生时,最常发生在纵隔,起源于肺部的病例极为罕见,文献中报道约20例,通常为转移瘤。黏液性脂肪肉瘤(Myxo
期刊
一、前言: 芽变是体细胞突变(Somatic mutation)的一种,是可遗传的变异。这种变异发生在顶端分生组织(生长点)的某些细胞内,包括有基因突变,染色体畸变和细胞质突变等。变异的细胞经过分裂增殖,把变异的遗传物质传递到分裂组织中,萌发成枝条,一般统称为芽变。无性繁殖植物中,芽变比较普遍,特别是园艺植物,如花卉和果树芽变更为常见。1936年A.D.Shamel及C.S.pomeroy调查了
期刊
国家“双减”政策的出台,使得教师应从全新视角出发,重审做好小学语文作业创新设计的必要性与现实意义。然而,受到长期以来传统思想观念的制约与影响,很多教师往往将作业看作提升学生认知能力、巩固课堂教学效能的唯一手段,且作业量的不断增大,无形之中加剧了学生的学习负担。同时,很多重复性、单一性作业的不断涌现,严重影响了学生语文兴趣的培养与认知潜能的开掘,且对学生语文学科核心素养的塑造也产生了严重制约。针对这