【摘 要】
:
随着云计算和大数据业务的不断发展,人工智能时代下大规模新型业务量的日益增长,给现代数据中心带来了业务复杂化和流量多样化的严峻挑战。作为大数据重要支撑的数据中心,密集型应用的急速增长使得传统数据中心处理计算愈发的力不从心。而分散式数据中心(DDC)光网络架构凭借其高带宽、低能耗以及支持资源灵活调度的优点受到广泛的关注。然而,计算和存储资源分散到不同的资源群组使得网络间通信的流量需求变得多种多样,网络
论文部分内容阅读
随着云计算和大数据业务的不断发展,人工智能时代下大规模新型业务量的日益增长,给现代数据中心带来了业务复杂化和流量多样化的严峻挑战。作为大数据重要支撑的数据中心,密集型应用的急速增长使得传统数据中心处理计算愈发的力不从心。而分散式数据中心(DDC)光网络架构凭借其高带宽、低能耗以及支持资源灵活调度的优点受到广泛的关注。然而,计算和存储资源分散到不同的资源群组使得网络间通信的流量需求变得多种多样,网络的传输性能和调控机制仍可能成为影响DDC内分布式应用计算性能的瓶颈。为此,本论文针对DDC中分布式应用的计算及网络需求带来的机遇和挑战,从不同角度研究了 DDC光网络资源的控制机制,并进行了设计与实验验证,主要研究内容如下:第一,本文基于DDC光网络结构完成了计算应用的性能评估。由于DDC中应用需要计算和网络传输协同完成具体的运算过程。因此,本文结合DDC内应用的通信特征和流量模型,设计并实现了面向计算应用的DDC模拟器,具体从本地内存比例和网络资源分配的仿真方案进行了详细的设计。另外,本文基于自研的网络模拟器,对计算应用进行了性能分析。仿真结果表明,同传统数据中心相比,为了满足应用级性能,DDC网络所需要提供的带宽不低于40Gbps,并且其计算资源池中的本地内存比例不低于35%。第二,本文为实现计算应用性能优化的目标,分析了 DDC网络中影响计算应用性能的瓶颈因素。网络资源的不合理分配将增加传输时延,降低吞吐量进而影响业务的整体性能。为解决此问题,本文提出了 DDC光网络资源调控机制,并基于建立的网络调控机制进行实验平台的搭建,主要包括资源分散式计算平台和基于FPGA网络接口的设计与实现,计算请求可以通过此接口访问远端内存空间,且完成了缓存区流量感知的带宽调度功能。同时本文通过对比分析,证明了网络调控对不同分布式计算框架的应用性能具有差异化的改善效果。
其他文献
极化是电磁波很重要的特性之一。对于各种极化态的操控,需要借助极化转换器来完成。极化转换器在卫星通信、电磁隐身、天线设计、成像和波束控制等方面,发挥着重要的作用。传统的极化转换器主要利用自然界现有的材料,依靠材料本身所具有的双折射效应和圆二色性等特性对极化态进行控制。然而,这往往需要厚重的体积,以实现在传播方向上足够的相位积累。超材料的出现则为极化转换器的发展提供了新的方向。本文基于超材料的设计思想
随着互联网行业的高速发展,互联网产品的功能逐渐复杂化,行业内的竞争也越来越激烈,在互联网项目及企业中引入科学先进的风险管理方案显得尤为重要。本研究以D移动办公平台项目为例,对互联网项目的风险管理进行深入的研究,旨在研究出科学合理且适用于互联网项目的风险管理方案,从而提高互联网企业的竞争力。本研究首先通过专家访谈法、组织全员头脑风暴会等方法对D移动办公平台产品3.0迭代项目在各个阶段的风险因素进行识
随着现代通信的不断发展,作为信息物理载体的光纤正在扮演愈加重要的角色。光缆故障属偶发事件,但光缆数量的激增导致光缆故障愈加频繁的出现。光缆安全监测技术是光缆运维不可或缺的关键技术,有效的光缆安全监测技术能大幅降低运维成本,提高运维效率。光纤传感技术因其体积轻便、安装便捷、无源、抗干扰等优势,已在各个领域中作为一种重要的监测手段而被广泛使用。光缆安全监测已有成熟的解决方案,但主流方案具有硬件成本与改
随着大数据、人工智能技术的进步,计算机视觉领域受到人们的广泛关注,它的主要目的是创建可以像人类一样处理、分析和理解视觉数据的数字系统。本文主要研究了计算机视觉领域中的人体姿态估计和预测问题。前者是指从包含人的图像或视频中获取关节点的位置信息。后者是指在人体姿态估计的基础上,利用历史姿态位置信息预测未来一段时间内的姿态变化情况。目前,这两项技术已经被广泛应用于视频监控、医疗健康、自动驾驶等领域。本文
随着互联网的不断兴起以及各大社交媒体的不断普及,拥有智能终端的用户可以随时随地的浏览时事热点报道。他们可以使用推特,微博,知乎等社交媒体平台及时的发表意见,交流观点。而在谣言监测和舆情分析等应用场景下,文本中所表达的用户立场倾向至关重要。但传统的人工抽样调查的方法存在成本过高,效率过低的问题。因此需要一系列自动化手段帮助我们从海量的社交媒体文本中识别出用户对于相关事件的立场。传统的情感分析技术仅对
随着监控设备数量的增加,视频监控已经逐渐成为维护社会治安和法治的重要工具,也成为智慧城市中协调交通资源的重要支撑。通过现有的视频监控和定位,已经可以越来越多的掌握行人、行车等重要的位置和行为信息,但现有获取信息的数量还仍然跟不上未来万物互联时代庞大的信息需求。比如在漫长的高架桥、偏远的乡村、广阔的海域上,不可能密集布满摄像头装置;又比如在高楼林里的城市里,固定摄像头会被遮挡,留下很多监控的死角。现
传统的地基网络受基础设施、输电线路规模、维护手段的制约,无法部署到环境复杂的地方。因此,为满足高可靠通信的需求,构建一个由卫星网络、临近空间网络以及地面网络组成的空天地网络已成为未来的发展趋势。但相互隔离的网络之间难以实现高效互联互通,随着移动节点的加入,将进一步增加网络复杂化的程度和网络管理的成本,难以满足低时延高可靠通信业务的需求。为应对以上问题,异构网络融合、网络切换等技术被提出来以实现空天
随着社会的发展,软件正发挥越来越重要的作用,软件质量也越来越受到关注。为了能够在软件开发阶段发现软件中存在的缺陷,研究人员尝试使用机器学习预测软件中可能存在的缺陷,然而该技术在应用过程中可能存在冷启动和数据分布差异等问题。为了解决该技术中存在的问题,研究人员提出了跨项目软件缺陷预测方法。跨项目缺陷预测利用一个或者多个源项目的历史数据建立缺陷预测模型,然后对目标项目进行缺陷预测。目前跨项目软件缺陷预
激光混沌系统由于可以输出动力学行为复杂,不可预测,类噪声的高维混沌信号,是安全通信领域的研究热点。激光混沌系统主要分为基于激光器内部非线性效应的全光混沌系统与基于外部非线性反馈环路的电光反馈激光混沌系统。电光反馈激光混沌系统由于鲁棒性强,输出信号带宽宽,有较大的实用性。但是,电光反馈激光混沌通信系统存在安全问题,电光反馈激光混沌系统的动力学方程为延时微分方程,系统会在反馈回路延时的位置处表现出相当
智慧城市作为一项国家战略,已经成为改善公共服务,提升治理能力以及城市转型和现代化的重要切入点。随着智慧城市建设的不断深入发展,对资金的巨大需求给传统以政府主导的智慧城市模式带来重大考验。以PPP模式为契机,智慧城市建设已开始迈向全社会共同参与建设的阶段。由于智慧城市项目的特点是建设周期长,投资大,复杂多样等,加之引入PPP模式,这会给项目的风险管理带来严峻挑战。本文首先阐明研究背景和意义,分析国内