Hadoop平台的任务调度算法优化研究

来源 :数字化用户 | 被引量 : 0次 | 上传用户:taozhzzl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop已成为研究云计算的基础平台,MapReduce是其大数据分布式处理的计算模型,在计算速度,容错性,可靠性等方面具有优势,因此得到了广泛的商业应用与科学研究.而任务调度算法作为MapR veduce的核心组成部分,它的优劣成为了直接影响MapReduce性能的关键因素,因而得到了广泛的关注.本文提出基于动态自适应任务(DASA)调度算法,通过改进调度间隔的选择、任务优先级的划分、调度策略的选择和资源约束条件,从而提高整个集群的效率.
其他文献
随着我国经济的发展各行各业产生大量的塑料废物,同时在环境影响下氧化和降解为形态各异的微塑料,致使微塑料污染问题日益严峻,这就对环境信息化管理工作提出了新的要求.本文
营造林是国家为了防止土壤沙化、水土流失、气候恶化等而培育的大面积种植林地,主要以非耕种林地为主,如荒地、荒林地等,主要是调节气候、保护生态环境,在保护环境之于为人民
1.培好一池水:养好一池虾、蟹首先要培好一池水,池塘因从5月开始,每隔1个月或20天就要用“药饵”和“药液”防治病虫害1次,难免存在一些残留物质,到秋季更要勤换水,预防池水
我厂化验室在产品检验过程中,每年产生大约20~30t的废旧混凝土试体,既占用场地又影响环境的美观.将这些废旧水泥沙浆试体重新粉磨后,加水成型,能否重新凝结,并具有一定的强度
路灯是城市建设重要组成部分.目前,路灯管理主要依赖人工管理,自动化程度不高,造成路灯系统维护困难、能耗较高等问题.针对LED路灯远程控制管理的需求,采集环境照度,路灯开关
摘 要:本文主要通过地面气象观测资料、高空气象观测资料等相关资料对2017年4月6日-7日暴雪天气过程进行分析,并阐述了其对民航飞行的影响。结果表明:在此次暴雪天气出现前期,亚欧大陆中高纬主要表现为2槽1脊的径向型环流形势。本次暴雪天气的主要影响系统是南支槽、西南急流以及副热带高压。暴雪天气的发生以及维持的主要原因是南支槽的缓慢移动造成的。此次暴雪天气过程中的水汽条件特别充沛。相对湿度超过85%的
文章以影响电子商务经济效益的因素为研究对象,首先从客观与主观两个层面入手,分析了电子商务经济效益影响因素,随后围绕如何提升电子商务经济效益,提出了一些针对性的措施,
泄洪闸牛腿模板支立一般采用脚手架支撑,根据本工程的特殊性,在施工中采用上部吊模的方式,可节约脚手架的投入量及安装量,同时,本工程的较大型钢模板设计也是在水电工程上较
采用模压发泡法制备了低密度聚乙烯/纳米碳酸钙(LDPE/nano-CaCO3)复合发泡材料。研究不同含量的nano-CaCO3、发泡剂AC、交联剂DCP等对LDPE/nano-CaCO3力学性能及发泡效果的影
1.苗木栽植前的定干与整形rn新购苗木在栽种前一般需要根据自己的枣园的栽种形式进行一下简单的修剪和整形.rn(1)自由纺锤形和小冠疏层形的冬枣树的定干与修剪.对自由纺锤形