基于多变量动态算法的Hadoop负载均衡优化与实现

来源 :电信科学 | 被引量 : 0次 | 上传用户:ximage
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
分析了云计算平台Hadoop负载均衡机制,针对Hadoop系统自带的均衡器要预先输入阈值才能运行的不足,通过多变量动态估计阈值对其进行优化与实现,依据集群磁盘空间负载情况和集群繁忙程度,动态估计均衡器的阈值,并给出了与估计阈值相关的计算公式,在此基础上采用集群系统对上述算法进行了测试验证。实验结果表明,对比Hadoop系统自带的需要固定阈值的均衡器,新方法能在均衡过程中利用系统相关信息动态估计阈值,对Hadoop的负载均衡优化取得更加令人满意的效果。
其他文献
我们学校的李安纲先生花了好几年的工夫来研究《西游记》,成绩斐然。他完成了140万字的《西游记新评新校》、30万字的《美猴王演义》、50万字的《凡夫修行路》以及有关《西游
近年随着下肢创伤、外伤性截瘫病人的增多以及人工髋关节、膝关节置换术的普遍应用,骨科病人并发下肢深静脉血栓形成(DVT)的病例逐渐增多。国外文献报道骨折伤病的下肢DVT发生率
我校中文系李安纲教授花费了巨量心血,对中国古典文学名著《西游记》的作者和主题进行了深入的研究、考辨和探索,近十年来,他独辟蹊径,敢立新说,发表了大量的学术论文,出版了
用4-AAP-HCCI3测定挥发酚时应注意的几个问题:首先要严格控制pH值,预处理蒸馏水样时加H3PO4应稍过量些;其次在分析时所加的各种试剂的顺序不能随意更改;在测定的空白值较高时
近些年来,很多高师音乐系由于扩大招生,致使一些技能课程严重师资不足,为了提高效益,缓解教学矛盾,便将原"一对一"的个别课改为集体课.从推行、操作情形来看,苦忧掺半.从高师
解物理题是学好物理课重要的环节,在解题过程中要注意辨别已知条件,充分利用示意图,进行过程分析,计算得出结论,并拓宽思路,养成物理的思维习惯.
本文讨论了以强校升本为契机,以渗透信息技术为思路,加强实验室建设,提高实验室的层次与水平的思路,为适应素质教育,充分发挥实验室的整体功能提供了有益的借鉴.
本文从实际中抽象出文字处理指针的定义,并利用它从数学角度出发,给出了在字处理过程中难以下手的两个问题的量化办法,具有实用性的通用性。
云计算作为一种新的分布计算技术,变得越来越流行,正快速改变不同应用的计算环境。在云数据中心中,电力的消耗越来越严重,随着全球能源的涨价,数据中心的能耗成本也在增加。云计算的一个主要目标是通过规模经济为用户提供省钱的服务,而这些云服务的能耗成本已经非常显著,因此,如何提高整个云平台的能耗效率变得越来越重要。本文分析了云计算中心能耗的组成,对云数据中心能耗管理的相关研究进行分类、分析与总结,最后,对未
传统网络的分层设计不能满足具有特殊QoS需求的无线宽带业务,无法应对动态频谱接入的无线通信环境。采用联合开放、架构灵活的跨层设计研究无线Mesh网络接入技术日渐成为热点。本文首先介绍了跨层设计的起源、分类,然后分析了认知无线Mesh网络跨层研究的挑战、难点及最新进展,并提出利用跨层设计实现路由及频谱管理的一种构想,最后展望了认知无线Mesh网络跨层研究的新方向。