Hadoop HDFS和MapReduce架构浅析

来源 :邮电设计技术 | 被引量 : 0次 | 上传用户:cqc465330937
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在简述Hadoop namenode、datanode运行模式的基础上,重点介绍了Hadoop MapReduce的工作机制,并以作业提交、作业初始化、任务分配、任务执行和任务进度更新等流程介绍了Job Client、JobTracker、TaskTracker和HDFS在MapReduce过程中的分工与协作,最后,对云计算作出展望。
其他文献
市场经济条件下,企业通过公司理财活动来进行税收筹划已经成为一种客观存在的经济现象。电力企业属于国家控制的垄断行业,在国家控制电力价格的情况下,税收筹划显得尤为重要
<正>作为"中国制造"的窗口之一,东莞在对接"中国制造2025"国家战略上已率先"抢跑"今年3月,李克强总理针对产业发展提到了一个新概念:要实施"中国制造2025"。事实上,作为"中国
<正>李克强总理在《政府工作报告》中指出,制造业是我们的优势产业,要实施"中国制造2025"。从制造业转型升级,2020年基本实现工业化,到迈入制造业强国,可以说这是我国实施制
文章分析了当前幼儿园社会教育存在的问题,提出教师应在把握幼儿园社会教育本质的基础上,改变教育观念,从教育活动设计的情境化、教育内容的生活化、教育方法的特殊性和实施
阳山金矿带位于西秦岭勉略缝合带的文县弧形构造带内,是研究复合造山带中金矿成因的理想选区,巨量金的来源及聚集机理是亟需深入研究的关键科学问题。论文通过系统的矿床地质和
实施营业税改增值税是国家促进产业结构调整的重要措施,建筑行业外部环境不理想,实施营改增有可能增加实际的税负。本文从营改增对建筑企业的影响出发,对建筑行业应对营业税
我国是发展中国家,正处在社会主义初级阶段,长期以来粗放式的发展和对环境的忽视,使我们赖以生存的环境遭到破坏,生态功能下降,环境资源被消耗,致使环境质量持续恶化。环保投
以活性石灰为原料制备出氧化钙砂,采用轻水化碳酸化方法对粒度为3~5 mm的氧化钙砂进行表面改性处理,对改性前后氧化钙砂颗粒的表面形貌、显微结构和抗水化性能进行检测。结果
<正>改革开放以来新疆驻京办事处与祖国同呼吸共命运,与新疆稳定发展同频共振,在党中央、自治区党委和国管局党组的坚强领导下,抓住机遇,坐言起行,不断打破束缚思想的桎梏,扫