基于强化学习的低延迟大数据部署研究

来源 :长沙理工大学 | 被引量 : 0次 | 上传用户:cnfjwbx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大数据背景下,低延迟是大数据中心企业和公司面临的主要问题,延迟的降低不仅能提高数据中心处理性能而且提高用户服务质量,还能增强用户粘性。目前降低数据中心时延方法大多采用启发式算法或者是静态建模。然而,传统方法难以适应数据量激增和动态的数据中心环境。本文从数据中心数据部署角度出发,考虑分布式系统中数据的部署位置影响数据的读写延迟,提出K-means和Deep Q-Learning两种算法。一是针对数据中心网络拓扑结构和数据读写规律等特点,采用K-means算法对数据中心储存节点进行聚类,再对聚类后结果进行排序,采用靠近聚类中心的节点作为数据部署的节点。二是对于动态的用户请求和不断变化网络配置,将数据部署问题建模马尔可夫决策过程,采用强化学习,并使用神经网络拟合DQL输入状态,数据读写请求与数据中心环境进行不断交互学习,以延迟作为奖励,求解最优数据部署策略。本文的主要的工作内容如下:本文通过分析数据中心网络拓扑结构特征和数据读写请求等规律。融合K-means算法,并采用算法进行了实验仿真,搭建mininet模拟数据中心网络环境。经过实验对比,K-means算法相比传统算法CommonIP(数据尽可能靠近经常访问它的IP地址),数据读写延迟分别减少了 61.5%和53%。考虑到动态变化的数据部署场景,采用强化学习DQL算法,而对于强化学习中状态输入空间过大问题,使用DQL深度神经网络来进行拟合值函数。本文还进一步对DQL状态空间进行稀疏化,减少神经网络输入,从而提高性能。本文采用与K-means算法相同的实验环境,通过实验的仿真对比,DQL相比于CommonIP,数据读写延迟分别减少了 63.9%和82.4%。实验结果证明运用强化学习DQL算法在动态变化的数据中心网络环境下具有很强的适用性。
其他文献
目的:为掌握羊源伪结核棒状杆菌的分离鉴定,了解其致病性,探求其制备的灭活疫苗的免疫效果,以期为进一步研究该病原的致病机制及其防控奠定基础。方法:(1)病原分离鉴定:将贵州某羊场疑似发病山羊的病料接种于普通琼脂平板、鲜血营养琼脂和LB液体培养基中观察其培养基生长形态基特征;根据疑似细菌的16Sr RNA序列设计引物,挑选单个菌落进行PCR扩增,连接p MD18-T载体,转化DH5α感受态细胞,然后测
在构建“中国电影学派”的学术倡导下,区域电影研究已成为学界关注的热点话题。内蒙古电影题材内容丰富,新人导演层出不穷,被众学者称为“内蒙群”,意指近几年内蒙古区域电影新导演及作品。本文以2014年至2019年,内蒙古籍较为活跃的青年导演创作的“城市电影”为研究对象,选取具有代表性的电影导演张大磊、德格娜、周子阳、忻钰坤的城市题材作品进行解读,探析他们作品中内蒙古城市空间的叙事特色。论文聚焦青年导演电
融资方式的选择对于企业来说是非常重要的一个部分,因为它不仅关系到资金来源的稳定性,还影响到企业的融资成本。因此,任何企业在选择融资方式时,都需要结合企业自身的特点以及权衡不同融资方式的利弊。然而由于传统的融资工具总是具有各自的缺点,因此随着市场经济的发展,新型的融资工具顺势而生,可转换债券就是其中之一。由于可转换债券既具有债券性质也具有股权性质,因此它解决了传统融资方式无法平衡股权稀释和到期需要还
传记文学,如访谈录、日记等,属于纪实文学的一种,此类文学作品中的传记人物、时代背景等内容都包含大量不同民族的文化信息。而且文化信息的正确处理在翻译中能够帮助目的语读者更好地理解原文本所要传递的内容。因此,译者在此类文本翻译中需认真考虑文化信息传递的问题。然而,目前国内相关研究主要集中于信息类文本翻译方面,而访谈式传记文学翻译中文化信息传递问题研究却稍显不足,亟待加强。本报告在接受理论指导下,通过对
3-甲基吲哚是一种重要的吲哚衍生物,广泛应用于农业、医药和工业等领域。采用绿色、简单、高效的方法制备3-甲基吲哚一直是研究的重点和难点,而以苯胺和生物质基甘油合成3-甲基吲哚,为目前最有前景的方法。本文以ZnO、Fe_2O_3修饰的Cu/SiO_2为催化剂,在不锈钢高压反应釜内催化甘油和苯胺合成3-甲基吲哚,主要研究了ZnO和Fe_2O_3助剂对Cu/SiO_2催化剂液-固相合成3-甲基吲哚的作用
页岩气藏作为一种特殊的气藏,受到世界各国关注。目前,研究页岩气藏的渗流规律一般都是在直角或笛卡尔坐标系中建立数学模型来描述其渗流特征。但是页岩气由其成藏机理可以看
市场经济的发展演变使得企业愿意通过信用销售的方式抢占市场。而市场竞争的日益激烈促使企业急需获得更多的市场份额,实施更加宽松的应收账款政策,这使企业产生大量应收账款。同时,企业应收账款的管理问题将会直接影响企业的资金流通,如果管理不到位将会发生严重的坏账风险,会对企业后续发展产生重要影响。应收账款的累积不但会大幅提升企业管理成本,而且会导致企业利润质量持续降低。从而增加了企业的经营风险以及管理风险。
目标跟踪是机器视觉领域的热点研究方向,是模式识别、图像处理、计算机视觉、机器学习等学科的交叉研究。自然界中,视觉对动物接收外界信息并做出相应的反应起至关重要的作用,利用机器视觉代替动物的视觉系统对智能化发展有着极大的意义。实际生活中的目标在运动过程中可能会发生形变、快速移动、目标与背景混杂、跟踪图像序列分辨率低等问题。由于这些问题造成的目标外观变化对目标跟踪的精度有着很大的影响,近几年基于深度卷积
背景和目的:血栓形成是恶性肿瘤患者常见合并症,在现有研究中,支持恶性肿瘤患者预防性抗凝获益的临床数据十分有限。本研究目的:(1)评估低分子肝素预防肿瘤患者血栓形成的有
随着特检行业不断地增加需求,特检行业市场化改革已经是大势所趋。这既是发挥市场机制,促进特种设备检验服务专业化发展的需要,也是转变政府职能,提高社会公共管理水平的需要。以前的检验模式不能进行有效的监管,政府机构既是监管者又是参与者,出现了很多弊端。推进特检的市场化可以帮助我们遏制腐败违规现象的发生,将政府监管和市场服务一分为二区分开来,政府再也不需要在进行监管的同时,又要进行市场化服务的工作。XX市