异构环境下Hadoop推测执行算法

来源 :计算机与现代化 | 被引量 : 0次 | 上传用户:erywwb
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
研究和分析Hadoop推测执行算法在异构环境下性能较差的问题,在深入研究源码的基础上提出改进算法。该算法根据系统负载情况自动调节后备任务的执行,实现系统负载均衡。采用Zaharia提出的历史平均剩余完成时间来估计剩余时间,并使用剩余时间值大于20%的方法来判断掉队者,进而得到更精确的掉队者队列。该算法在一定程度上提高了异构环境中推测执行的性能。
其他文献
在对期刊、图书馆学、图书馆学期刊等概念界定的基础上,指出民国时期图书馆学期刊的研究范围;通过比较民国时期图书馆学著作与期刊二种传播媒介的差异来说明后者在学术史研究
多边形是构成三维模型表面的基本元素,多边形的三角剖分及三角形的三角细分是计算机三维快速建模及纹理帖图的基本技术。本文在研究平面多边形的三角剖分及其三角网格化相关理论的基础上,利用面向对象技术及递归程序设计方法,实现多边形的三角剖分及其三角细分的算法设计,并对该算法的执行效率进行分析。实验结果表明,该算法具有较高的运算效率及实用价值,对实际应用有较好的参考作用。
'二十年后回家乡'这个作文题目,大家再熟悉不过了。就算没看过你写的'二十年后回家乡',小编也能把你的构思和内容猜个八九不离十——老同学齐聚校园,每个人
我有一个可爱的妹妹——沫沫,她有一张肉乎乎的圆脸蛋、一张粉嘟嘟的小嘴,还有一双水汪汪的大眼睛。无论什么时候见到她,她总是傻乎乎地笑着,还会'咿呀咿呀'地招呼你
新闻工作者只有采用准确的定位、适当的形式以及丰富的内容来将报纸可读性很好的提升,才能够真正满足受众的需求。然而,想实现这一个目标,必须努力做好编辑工作,这无疑成为了一种
【正】古典芭蕾舞剧《希尔薇娅》演出时间: 11/1 6、11/1 7演出地点:上海大剧院票价:800、600、400、200作为第六届中国上海国际艺术节的闭幕式.《希尔薇娅》是由来自世界芭
在飞机协同设计中,原始基于XML的应用适配器因XML数据格式在封装和解析过程中的复杂性,使得其运行过程中产生许多不必要的性能损耗。因此,本文基于JSON数据交换格式,用JSON替
假期眼看就要结束了,我原本可以抓住最后的机会,随心所欲地睡懒觉,但,我却失算了。晚上9点,我刚准备躺下,手机就响了。我疲惫地接听电话,原来是在外地出差的妈妈打来的。她问
随着知识经济时代的到来,新闻事业的重要性越来越明显。新闻媒体若想在激烈的市场竞争中,保持自身的活力和较高的关注度,就需要提高新闻采编的质量,新闻采编工作需要一个团队
以某煤矿为例,经实地野外调查,充分分析了矿区地形地貌、地层岩性、地质构造、工程地质特征等,预测评估了煤矿开采引发地表变形对建筑物的损坏程度,为矿方制定目标、提出决策等提