面向多用户环境的MapReduce集群调度算法研究

来源 :高技术通讯 | 被引量 : 0次 | 上传用户:Colo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对MapReduce集群现有调度策略在多用户环境下无法根据用户的实际资源需求实现动态资源分配的问题,提出了一种基于历史执行信息(HEI)的MapReduce集群调度算法——HEI Scheduler。该算法通过建立集群作业执行信息的收集和分析机制,得到各用户组资源需求随时间变化的规律,并以作业实际占用slot的时间作为作业占用资源量的衡量标准,进而动态地确定资源池的最小共享资源以及集群剩余资源分配的权值。实验结果表明,执行信息分析机制能够更准确地表征作业对资源的需求,采用集群调度算法HEI Schedu
其他文献
【摘 要】初中教学是基础教育,所以,初中教育必须向全体学生,为学生今后各方面的需要打好基础,化学学科同样担负着这一任务。为圆满完成这一任务,初中化学教学,特别是农村的化学教学必须协调好各种关系,尤其要正确处理以下三个关系:素质教育优于升学考试,分组实验与家庭小实验相辅助,化学竞赛带动学生的大面积提高。  【关键词】农村初中;化学教学;协调关系  一、素质教育与升学考试的关系  中共中央颁布的《中国
一、修复性司法的具体内涵    “恢复性司法是对犯罪行为作出的系统性反应,它着重于治疗罪行给被害人和社会所带来的或者引发的伤害。”[1]修复性司法除了社区矫正功能以外,还能通过犯罪加害人、受害人、社区三方的共同参与,平等协商受害人的补偿及犯罪行为人应当负担的责任,修复社区秩序与缓解加害人与社会的紧张关系。所以,修复性司法相对传统的报应刑思想及短期自由刑具有无可比拟的优点。具体而论,修复性司法的方式
瓦记录技术(SMR)采用部分叠加相邻磁道的方式增大磁盘碟片的面密度,其磁道相互叠加,使得瓦记录磁盘无法进行原地更新,是因为直接更新某一磁道上的数据可能会覆盖掉相邻磁道上的
研究了大规模超级计算机群系统的失效预测.针对现有的单一分析系统日志的方法不仅需要复杂的分布式数据挖掘技术,而且失效预测的召回率普遍不高的问题,提出了一种通过将记载
国务院国资委副主任李伟在日前出版的《学习时报》发表文章披露,目前有68家央企从事金融衍生产品业务,主要涉及商品期货、汇率掉期、利率掉期,以及期权、结构性存款等品种。截至
郑州市惠济区辖2镇6个办事处,54个行政村,是以农业人口为主的城市区。全区常住总人口150543人(其中农业人口127286人,非农业人口23481人),已婚育龄妇女27702人,实际使用药具人数2252
建设高素质专业化教师队伍是推动高职教育科学发展的根本保障;高职教师进企业顶岗实践是提高教师专业素质的一个重要途径。文章针对高职院校青年教师在教学实践中存在的缺陷,分
【摘 要】 班主任是班集体的组织者,是学生们的教育者,是班级与其他任课老师之间的纽带,是学校实施教育教学工作计划的实践者,是学校和家庭沟通的桥梁。班主任工作做的是否到位,直接决定了学生的发展和职业教育的质量和成果。特别是作为职业中学学生的班主任,更加需要关注对学生的管理。本文结合了笔者的实际教学经验,从班级建设、德育教育、联系纽带三个方面展开了对职业教育类班主任工作的探讨。  【关键词】班主任工作
情景模拟教学法不仅有助于学生对课程知识的深入理解,而且能对学生综合能力的提高起到一定的促进作用。文章结合高职“金融学基础”课程的教学实践,对情景模拟教学内容的选取