一种兼顾负载均衡的Hadoop集群动态节能方法

来源 :清华大学学报(自然科学版) | 被引量 : 0次 | 上传用户:zmaozhao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop集群广泛应用于企业和研究机构的大数据处理和并行计算中。该文针对Hadoop集群节点管理中缺少动态负载均衡和节能相互结合的调度技术的现状,提出一种动态负反馈调整算法,并设计和实现了一个用于Hadoop平台节点动态管理的系统。通过大量Hadoop经典测试用例测试,结果表明:该算法能够有效提高负载均衡并通过减少节点的空闲时间以有效地节能,与未使用本算法的结果相比,节点平均空闲休眠时间增加25%,节能14%。同时通过与其他算法相比,节点间均衡度有一定程度提升,平均负载方差减少10%。
其他文献
作者在美国明尼苏达大学青少年卫生培训班学习期间,收集了美国青少年卫生的有关资料和进行了一些调查研究,现将这方面情况简要介绍如下,供国内儿少卫生专业及有关人员参考。
在农业生产过程中,农业能源一直都是重要的投入要素,对于农业发展起着至关重要的作用。近年来山东省农业发展取得了不俗的成绩,随之而来是农业能源消费规模的持续走高,过量的
目的对比单用钻孔引流术与联合阿托伐他汀钙片治疗慢性硬膜下血肿(CSDH)的疗效。方法抽取2015年1月~2017年1月我院收治的62例慢性硬膜下血肿患者作为研究对象,随机分为研究组(32
经济的快速发展以及发展的不平衡,社会转型期诸多矛盾的激化,导致犯罪越来越制约着社会的发展。本文旨在通过对塘沽区的犯罪现状进行分析,找出它的变化发展规律,在借鉴国内外成功
我国教育经济学已经取得的主要理论贡献,诸如教育与社会生产之间的关系、教育投入与经济发展关系、教育投资短缺、教育资源合理配置、教育经济效益、教育产业化与后勤社会化
为了解决数据在失控状态下的安全问题,提出了一种数据自毁方法。该方法定时对数据进行失控检测,一旦发现数据失控,立即将其彻底擦除,使其不可恢复,防止数据泄密。整个过程无须人工
催化剂在化学反应中起着非常重要的作用。催化剂的性质不仅取决于催化剂的成分,而且与催化剂的制备方法、工艺条件密切相关。己内酰胺是石油化工生产中的一种重要化工原料,98%以
监护制度中的核心内容是监护人的确定。双方通过意定产生监护人,充分彰示出未来的被监护成年人的自由主动之意愿,宜称之为"成年人自主监护"。成年人自主监护制度远承罗马法"
本文首先分析了国内外农业经营主体耕地利用对环境压力适应方面的研究。在此基础上对已有研究进行总结,指出未来研究要重视生态脆弱区、适应的环境生态效应和多层次综合研究
在大庆外围"三低"油藏选择了有代表性的朝阳沟和头台两个油田开展了微生物吞吐矿场试验.头台油田筛选出了嗜热耐高温80℃菌种,朝阳沟油田筛选出了嗜温45℃菌种.试验结果表明,