大规模MIMO系统中功率分配的深度强化学习方法

来源 :小型微型计算机系统 | 被引量 : 0次 | 上传用户:haoaini0413
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
对于最大化下行链路总和频谱效率优化问题,目前仍然缺乏针对多小区多用户大规模MIMO系统的研究,且通常未考虑上行信道状态信息的不完美。鉴于此,研究了上行信道状态信息不完美条件下的多小区多用户大规模MIMO系统下行链路总和频谱效率优化问题,以最大化下行链路总和频谱效率为目标,提出了深度Q网络和深度确定性策略梯度的两种功率分配方法。深度Q网络可解决通信系统中维度爆炸和缺乏泛化的问题,但Q-Learning算法仅适用于离散空间,必须量化传输功率。而深度确定性策略梯度是适用连续动作空间的算法,可解决由于量化功率带来的性能下降问题。仿真结果表明,与其他传统功率分配方法相比,所提方法可获得更优的总和频谱效率性能,而且时间复杂度要低得多。此外,深度确定性策略梯度方法在总和频谱效率性能和时间复杂度方面都优于深度Q网络。
其他文献
拙文《抗战胜利后台湾行政长官公署的设立与撤销》(与陈红民教授合作发表,以下该文简称“拙文”)在《史学月刊》2020年第12期发表。文章运用新的档案史料,将一段史实经纬梳理得较清晰,获得学界部分朋友的称许。有位台湾学人阅读此文后,特意联络笔者,称台北“档案管理局”刚开放的新史料中,有些涉及台湾行政长官公署存废内容,并愿意提供。写作“拙文”时,主要运用的是“国史馆”的档案与《蒋介石日记》。既然有新档案
期刊
从现有水利工程项目的施工经验来看,做好基坑排水施工对于保障施工顺利进行具有重要意义。在本次研究中将采用案例分析法,在了解水利工程项目实际情况的基础上,对基坑排水施工技术的施工工艺展开分析,包括施工准备、施工技术要求等,并对基坑排水施工的施工质量管理方案展开讨论。根据案例水利工程项目的施工经验可知,该项目中所采取的基坑排水施工技术具有可行性,值得推广。
为充分适应小学英语教学场景,改善小学英语教学质量,需要合理引入智慧技术,重点关注学生的学习、成长过程,充分化解传统小学英语教学互动性不足、教学形态单一等问题,促进小学英语教学体系实现智慧升级。本文将结合《小学英语课程体系整体创新的实践与探索》一书,分析信息技术环境下小学英语教学的现状及问题,探索以信息技术为基础,创新小学英语教学的实践路径,以期为当前促进小学英语教学高质量发展提供有效参考。
期刊
监控理论是美国著名语言学家克拉申提出的语言习得理论。习得与学习假说、自然顺序假说、监控假说、输入假说、情感过滤假说是克拉申监控理论的五个组成部分,它对于人们进行可理解的语言输入教学来提高教学效果有益。本文结合人教版八年级上册第一单元课程为例,仔细论述监控理论如何运用到如今的英语课堂。
脂肪肉瘤是一种比较少见的软组织肉瘤,主要表现为无痛性肿块,生长缓慢,病程可长达数年,它们约占所有恶性软组织肿瘤的16%~18%。脂肪肉瘤通常见于成人,儿童很少发生。大约90%~95%的肿瘤发生在躯干、四肢或腹膜后,6%发生在头部和颈部区域,胸内起源的脂肪肉瘤很少见,占2.7%[1]。当胸腔内发生时,最常发生在纵隔,起源于肺部的病例极为罕见,文献中报道约20例,通常为转移瘤。黏液性脂肪肉瘤(Myxo
期刊
一、前言: 芽变是体细胞突变(Somatic mutation)的一种,是可遗传的变异。这种变异发生在顶端分生组织(生长点)的某些细胞内,包括有基因突变,染色体畸变和细胞质突变等。变异的细胞经过分裂增殖,把变异的遗传物质传递到分裂组织中,萌发成枝条,一般统称为芽变。无性繁殖植物中,芽变比较普遍,特别是园艺植物,如花卉和果树芽变更为常见。1936年A.D.Shamel及C.S.pomeroy调查了
期刊
国家“双减”政策的出台,使得教师应从全新视角出发,重审做好小学语文作业创新设计的必要性与现实意义。然而,受到长期以来传统思想观念的制约与影响,很多教师往往将作业看作提升学生认知能力、巩固课堂教学效能的唯一手段,且作业量的不断增大,无形之中加剧了学生的学习负担。同时,很多重复性、单一性作业的不断涌现,严重影响了学生语文兴趣的培养与认知潜能的开掘,且对学生语文学科核心素养的塑造也产生了严重制约。针对这
在边缘计算网络中,针对边缘节点计算资源和存储空间有限的问题,提出了一种基于改进深度强化学习(DRL)的边缘计算服务卸载(ECSO)算法,以降低节点处理时延和提高服务性能。具体来说,将边缘节点服务卸载问题转化为资源受限的马尔可夫决策过程(MDP),由于边缘节点的请求状态转移概率难以精确预测,因此利用DRL算法来解决此问题;考虑到边缘节点执行缓存服务的状态动作空间过大,通过定义新的动作行为替代原有动作
研究目的:近年来,社会各界对青少年学生的体质健康问题高度关注,而占用体育课、体育教师社会认同感低的问题却一直存在。教育改革、学校体育改革的文件出台后,"上有政策、下有对策"的现象同样层出不穷,使学校体育的发展迟迟无法取得显著成效。2020年,国务院出台《关于深化体教融合促进青少年健康发展意见》(以下简称《意见》)要求树立"健康第一"的教育理念,加强学校体育工作。2020年8月《意见》将体育科目纳入
家庭、学校与社会(家校社)体育协同联动,形成共育合力,是教育强国、体育强国、健康中国建设的必要路径。文章运用文献资料、逻辑分析等方法,对家校社体育一体化的困境及突破路径进行探索,研究认为:首先,家校社体育一体化进程涉及的领域多、范围广、关系繁,其中最重要的三个方面分别是价值理念、参与机制及资源保障。一是理念是顶层设计,是软力量,要想家校社体育一体化得到良好的发展,需有正确的价值理念作为行动的先导。