异构环境下MapRuduce任务调度算法优化

来源 :微型电脑应用 | 被引量 : 0次 | 上传用户:lishimuyi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop作为世界领先的大数据平台,其性能更多地依赖于Map Reduce任务调度机制。通过对Map Reduce任务调度机制中推测算法的研究,提出一种高效、准确和基于优先级的改进Hadoop调度算法。通过测试发现,改进后的Hadoop调度算法在异构环境下能够对落后任务判定准确,更好地维持系统的负载平衡,减少系统对任务的响应时间,增加对高优先级任务的响应速度,提高Map Reduce任务调度算法的性能。
其他文献
一、危机的成因对于发生此次金融危机的原因,理论界有许多的解释与争论。一些人认为此次危机主要源于国际资本市场本身所具有的不稳定性。另一些人则认为是“亚洲增长模式”失
<正> 1 胡逸之胡逸之号称"百胜刀王",在江湖上赫赫有名,可是很长一段时期不知所踪,即使出现也是昙花一现。但就是这一现却让人惊呼:世上竟有如此痴情男子!而且,他爱上的人竟
<正> 一、新闻时事栏目淡出黄金时段 让位娱乐节目 根据英国独立电视委员会(ITC,负责发放电视执照并制定节目准则)的规定,电视机构的主要频道必须履行的新闻传播职责是:周一
根据"双证书"人才培养内涵,构建"学—做—练"一体化课堂教学模式,"专业综合训练—职业技能培训—岗前培训"一体化实训教学模式",工学结合、顶岗实习"实习教学模式,有针对性地将针灸推
<正> 对国际金融发展趋势的分析,离不开对世界经济发展趋势的分析。当今的世界经济究竟是什么样的一个格局?是三极、五极、还是多极?学术界意见不是很一致,形势也不是很明朗,
<正>国家文化产业示范基地国家生态文明教育基地中国雕塑院根雕创作实践基地人创天成根以载道根宫佛国文化旅游区位于钱塘江的源头——开化县城南,是工艺美术大师徐谷青先生
受文化传统、媒体性质等因素的影响,不同国家的新闻媒体所秉承的新闻价值观也存在一定的差异,对这些差异做出认知与了解,有利于我国新闻媒体在取长补短的基础上实现更好的发
<正> 应英国广播公司的邀请,我于1988年2月至8月赴英考察该国的广播电视业,着重了解英国两大广播公司制作广播电视新闻和时事节目情况。我认为这些情况对我国正在进行的新闻
本文旨在探讨在噪音交易较多的中国股票市场中,公司治理对股价同步性的影响。实证结果显示,以控制权和现金流权之差度量的超额控制权和股价同步性之间存在显著的负相关关系,