【摘 要】
:
数据中心网络通常采用富链接的拓扑和多路径的路由来保证流量高峰期的业务稳定性,研究表明,数据中心网络的负载通常占实际网络能耗的5%-25%,这种设计使得在流量较少的情况下,数据中心浪费了过多的能源。深度强化学习的目的是通过智能体与环境的交互和对交互的评价来优化智能体决策,通过不断训练获得使收益最大化的策略。近年来,深度强化学习发展迅猛,已经在机器人、游戏等领域取得了傲人成果,与此同时,下一代网络的发
论文部分内容阅读
数据中心网络通常采用富链接的拓扑和多路径的路由来保证流量高峰期的业务稳定性,研究表明,数据中心网络的负载通常占实际网络能耗的5%-25%,这种设计使得在流量较少的情况下,数据中心浪费了过多的能源。深度强化学习的目的是通过智能体与环境的交互和对交互的评价来优化智能体决策,通过不断训练获得使收益最大化的策略。近年来,深度强化学习发展迅猛,已经在机器人、游戏等领域取得了傲人成果,与此同时,下一代网络的发展,数据平面和控制平面可编程成果的日趋成熟,控制平面可以实现实时控制数据平面、收集数据平面信息,满足了深度强化学习所需的可及时获得反馈的闭环环境。这启发笔者是否可将深度强化学习与数据中心网络节能相结合。因此,本文提出将深度强化学习应用于控制平面与数据平面组成的网络闭环系统实现网络节能的方案。主要思想是通过训练,使深度强化学习算法能在不造成数据中心网络拥塞的情况下,休眠一些链路和交换机,以实现节能。本文搭建了深度强化学习和数据中心网络的闭环系统,并在Spine-Leaf和Fat-Tree两种架构及不同负载情况下,实现了训练的收敛,证实了深度强化学习用于网络节能的可行性。按照本文给出的节能计算公式,Spine-Leaf架构在没有突发流量的情况下取得了如下效果:链路低负载情况下,实现节能34.4%;高负载情况下,可节能17.2%;在昼夜模式(即白天流量高峰,晚上流量下降)的流量模型下节能17.2%~34.4%。Fat-Tree架构在低负载情况下节能36%。
其他文献
为探讨腹腔镜直肠癌根治术中保留左结肠动脉(LCA)的安全性与有效性,回顾2016年1月至2018年12月于我科接受腹腔镜直肠癌根治术治疗的103例患者资料,根据术中是否保留LCA分为观察组(53例,术中保留LCA)和对照组(50例,术中不保留LCA),比较2组手术情况、术后恢复及随访情况.结果显示,2组患者术中出血量、肠系膜下动脉根部淋巴结清扫数目、手术时间、术后排气时间、住院时间、术后2年复发及转移率比较差异均无统计学意义,P>0.05;观察组术中游离脾曲、预防性肠造口及术后吻合口漏发生率均低于对照组,
为探讨免疫细胞和炎性因子与结直肠癌根治术后切口感染的相关性,回顾2017年5月至2020年7月于我院行结直肠癌根治术治疗的125例患者资料,根据患者术后是否发生切口感染分为感染组(40例)和未感染组(85例),比较2组术前一天、术后当天免疫细胞指标及术后第3天炎性因子水平.结果显示,1)免疫细胞:与术前一天相比,2组患者术后当天CD3+CD4+、CD3+CD8+、CD16+CD56+、CD19+含量均降低,P<0.05;组间比较,感染组术前一天和术后当天CD3+CD4+、CD3+CD8+、CD16+CD5
振动筛是选煤厂煤泥水处理系统中的关键结构,也是洗选工艺中的关键设备.振动筛故障常处于隐藏状态很难提前预测.针对选煤厂振动筛潜在故障可能导致被迫停机检修,影响正常生产等问题,通过对振动筛故障特点进行分析,利用传感器、监控站以及Labview上位机监控平台,设计了一套选煤厂振动筛故障监测和诊断系统,通过对振动筛故障前期表现出的特征进行提取和分析,实现了准确识别潜在故障,最终达到了提高选煤厂振动筛运行平稳性和可靠性,减少停工检修,有利于提高企业的生产效率和质量.
随着人工智能技术的发展,各个领域都利用人工智能提高了自动化水平和效率。司法领域也不例外,我国积极推进“智慧法院”建设,致力于用科技手段提高司法机关办案水平,进一步确保司法的公平性和效率,同时也为人民群众普法用法提供帮助。因此,研究人工智能在司法领域的应用具有重要的社会价值。本课题的研究内容主要包括三部分:1、基于预训练模型提取特征的混合深度罪名预测模型。受益于预训练模型新颖的模型架构,训练方式和海
神经可以支配人体组织,对运动、感觉和发育等功能起到重要调控作用,神经调节在肿瘤发生、发展过程中的作用越来越被重视,脑内神经祖细胞可以直接随血循环迁徙到肿瘤部位,促进肿瘤生长.本文综述了脑内神经元影响颅外肿瘤的各种途径,脑内神经元可以通过肿瘤内的神经纤维直接促进肿瘤生长或促进瘤内血管新生,并且脑内神经元亦可通过内分泌和免疫系统间接影响颅外肿瘤生长进程.基于神经对颅外肿瘤生长的重要调控作用,近年来,去神经支配、β受体阻滞剂及环境和行为治疗等方法在抑制肿瘤生长的基础研究中取得了良好的效果.通过手术或化学方法去除
针对传统刮板输送机自动张紧系统稳定性差问题,通过对原有系统进行仿真,得出在收缩工况下液压缸无杆侧的压力呈现大幅度波动,极易造成部件的损坏,提出系统优化设计思路,给出了基于遗传算法PID的优化方案,通过对方案进行仿真验证,优化后的系统压力达到稳定的时间明显降低,且压力波动幅度也有所降低,验证了优化方案的可行性,为矿井刮板输送机的稳定运行提供参考.
针对某煤炭企业地面供电系统可靠性较低的现状,以其控制系统为研究对象,提出矿井地面供电系统的改造方案.完成了改进供电系统的结构设计、硬件设计和软件设计任务,采用现场试运行的方法验证改进地面供电系统运行情况,统计结果显示,改进供电系统的应用可降低系统故障率近15%,成功解决了地面供电系统可靠性较低的问题,同时,减少了供电系统约12%的故障排除时间,节省多名系统运维人员,降低了煤炭企业的生产成本,保证了井下掘进设备的安全可靠运行.
针对煤矿空压机集中控制系统存在的控制模式单一、通讯系统薄弱、故障率高的问题,设计基于变频模糊控制的空压机集中控制系统.设计上位机集中监控平台、PLC控制柜、变频-空压机三层控制结构,并增加摄像仪作为辅助监控.设计变频、模糊PID控制算法对空压机进行实时控制,采用TCP/IP、CAN总线通讯实现空压机与上位机、空压机与变频器、低压控制柜之间的通讯.实际应用情况表明,该集中控制系统能够实现空压机控制系统的实时监控,保证空压机安全、连续、稳定工作.
假药是世界各国共同面临的难题,2018年全球报道的假药事件就有4405起,在五年内已增长102%。我国从“十一五”至“十三五”国家药品安全规划都强调要严厉打击制售假劣药品等违法违规行为。近红外光谱(NIRS)分析技术因具有方便、高效、准确、成本低、可现场检测、不破坏样品、不消耗化学试剂和不污染环境等优势,从2004年起就被中国食品药品检定研究院应用于全国车载近红外药品快速分析系统,并装备于全国36
随着互联网技术的高速发展,网络安全问题正日益受到人们的关注。近些年网络攻击事件频发,给社会发展和生产生活带来了极大的影响。入侵检测技术作为网络安全防护的核心技术,其重要性不言而喻。而当前网络入侵检测技术的研究仍然存在两个普遍问题。第一个问题是很多研究忽视虚警率,过度的注重准确率,造成网络入侵检测系统在实际使用过程中告警信息过多,效率低下。第二个问题是检测正常和异常的二分类研究较多,具体到入侵病毒种