云数据中心软件节能关键技术的研究

来源 :武汉大学 | 被引量 : 3次 | 上传用户:lovefish777
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
能耗问题一直是制约数据中心可持续发展的关键问题。特别是随着云计算、大数据的快速发展,数据中心的规模越来越大,能耗也随之增长。据IDC research咨询公司提供的数据显示:2015年我国数据中心总能耗将达到1000亿kWh左右,相当于三峡电站一年的发电量,2020年将超过2500亿kWh,或将超过当前全球数据中心的能耗总量。因此,降低云数据中心能耗已成为一个急需解决的对于环境和经济发展具有重要影响的重大社会问题。如何有效应对数据中心的能耗剧增问题?不同的研究专家分别从不同的角度展开了深入研究。本文主要讨论:如何通过融合云数据中心计算虚拟化、存储虚拟化和网络虚拟化所带来的与传统数据中心不一样的软件能力,探索适合大规模云数据中心的软件节能机制和系统原型,从IT系统的源头上降低云数据中心能耗需求。主要工作和创新如下:(1)为了减少数据计算环节的能耗,本文分析了云数据中心负载变化规律和用户期望完成时间变化规律。并建立起了以满足用户动态满意度为中心的资源分配与调度模型一云数据中心基于用户行为特征的资源分配策略模型。并通过一系列针对实际场景下数据的统计与分析,论证了该模型在云数据中心场景下的正确性。在新模型中,云数据中心的资源调度与分配策略不仅依赖负载模型,同时依赖用户预期完成时间模型。当系统预测到负载高峰即将到来时,系统控制中心不再是单纯通知资源调度中心增加资源,而是会同步预测用户预期完成的时间,根据两个函数的预测结果实时刷新资源调度与分配策略。使得系统在满足用户预期任务完成时间的前提下实现任务并发最大化,从而提升单位资源利用率,减少无效的资源迁移与调度能源消耗。因为本文研究的方法是以满足用户静态SLA为上限的方法,所以该方法相对其他以固定SLA为基础的资源调度算法有着更低的能耗。(2)为了减少数据存储环节的能耗,本文系统地分析了云数据中心重复数据的分布规律,构建了云数据中心的重复数据分布模型,并提出了用户感知的高性能集群重复数据删除存储系统。在新系统中,重复数据删除系统不再基于重复数据分布的时间局部性和空间局部性特征设计,而是基于新特征一重复数据用户局部性特征而设计。即相关度越大的两个数据Owner之间的数据会自动划分到同一组中,检索重复数据时也按相关度的大小在划定的分组内进行检索。这样,新算法中需要常驻内存的指纹数量就不再随着数据的线性增加而线性增加,从而解决了重复数据删除系统单节点的性能瓶颈问题。除此之外,本文还剖析了集群重复数据删除系统普遍存在重删率、性能与可扩展性相互竞争的“三难问题”。并通过引入虚拟节点和全局编址法,解决了当前集群重复数据删除系统所面临的“三难问题”。如前所述,本文解决了重复数据删除系统的性能瓶颈问题,从而为其应用到主存场景做好了准备,也为大幅度减少主存设备中的重复数据,降低主存设备的能耗提供了有力支撑。(3)为了减少数据传输环节的能耗,本文设计了一个应用感知的网络数据传输模型。在该模型中,网络设备不再是单纯的数据转发与复制,而是可以主动感知上层应用软件的数据传输模型,并充分利用SDN网络的可编程特性,自动地进行流量整合与优化,减少云数据中心的东西流量,达到降低能耗的目的。本文将该模型应用到大数据处理平台的数据存储系统中,将存储阵列的元数据有策略地发布给SDN Controller,并动态调整OpenFlow switch的流表,由管道直接分发和重定向数据,减少数据在服务器端的重复处理和在数据中心网络中重复流动,休眠空闲部分网络设备或链路,提高传输效能,达到节能的目的。综上所述,本文主要围绕数据计算、数据存储和数据传输三个环节的节能减排进行技术创新和突破。为降低云数据中心的能源消耗提供技术支撑。
其他文献
氧还原催化剂是决定燃料电池和金属空气电池性能的关键因素。采用一步溶剂热法,以4,5-二氰基咪唑和FeAc2为原料合成Fe-N-C共掺杂材料并研究了其氧还原电催化性能。通过X射线
以核心素养推进教育改革与发展已成为当今世界的热潮。全面认识核心素养内涵有助于建立我国学生发展核心素养框架,推进素质教育改革。通过分析核心素养的历史演变,揭示东西方
在分类教学背景下的高职公共英语教学中,根据学习者的需求和特点,改革传统教材和课堂教学模式,实现信息技术与学科教学的深度融合,立体化、交互式、多元化、开放性的互动教材
本文结合现有教材内容和学生常见偏误,从趋向补语的分类、结构、意义和语用四个方面提出了对外汉语教学的一些设想。在分类上建议把趋向补语的本义和引申义分成两类,教学时进
目的:分析多磺酸黏多糖乳膏治疗血栓性浅静脉炎的成本-效果。方法:收集多中心非随机同期病例数据,采用增量成本-效果分析对其成本-效果进行评价。结果:多磺酸黏多糖乳膏治疗
目的探索品管圈(Quality Control Circle,QCC)活动在降低儿童多导睡眠呼吸监测失败率中的应用。方法科内成立QCC小组,运用QCC手法针对儿童多导睡眠呼吸监测失败的原因,通过现
座谈时间:9月27日$$  座谈主题:打造“多浪文化”品牌。$$ 地委委员、宣传部部长孙振达:今天,我们在这里召开地区“多浪文化”座谈会,主要任务就是统一思想,围绕弘扬先进文化,
报纸
社区管理与服务专业对于推进社区建设与社会治理现代化具有重要的意义,实践课程体系的优化设计与运用成为当前培养高素质的一线社区管理与服务专业人才的突破口。社区管理与
羊肚菌是一种珍稀食用菌,富含丰富的有异亮氨酸、亮氨酸、赖氨酸、蛋氨酸等营养元素,具有巨大的营养价值。近些年来,随着人们健康意识的不断上升,羊肚菌的营养价值得到了更加
目的:探讨临床护理路径在骨科护理中的应用效果。方法:选择我院近期收治的100例骨科患者作为实验研究对象。将所选实验对象随机分成观察组和对照组,每组50例。观察组采用临床