基于HDFS的分布式存储策略分析

来源 :智能计算机与应用 | 被引量 : 0次 | 上传用户:zhoudm2005
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文重点围绕HDFS机架感知和副本存放策略方面对HDFS分布式存储进行剖析。副本存放策略和机架感知主要通过Datanode节点形成的树状网络拓扑图来让Namenode节点获取,从而确定副本存放的位置,这种方式保证了对于数据的极高的容错性的同时也兼顾了数据本地化,即提高了数据在集群网络中的传输效率。基于此,提出一个设想,希望通过对副本存放策略的深入挖掘,根据Datanode数据节点的实时状态信息,实现对于数据块副本的定向存储,再由数据驱动任务分配,来为每一个Datanode数据节点分配更适合的任务,从而达到负载均衡提高资源利用率的作用。
其他文献
针对目前各种道路照明节能研究都必须满足道路照明设计标准这一现状,直接从道路照明设计标准本身出发研究有效的道路照明节能方式,通过对比分析CIE和IESNA两种道路照明设计标
基于性能的抗震设计理论与方法是目前世界各国学术界和工程界广泛关注的课题。作为一种更合理的设计理念,它代表了未来结构抗震设计的发展方向,本文阐述了基于性能的抗震设计理
本文基于Web of Science检索2000年-2017年图书情报领域高被引研究性文献,以关键词为分析单元,共词分析和聚类分析为方法,Sci MAT为知识图谱绘制工具,识别国际图书情报领域研
<正> 我科门诊自1990~1995年共发现幼女淋菌性阴道炎合并淋菌性尿道炎6例,现将诊疗结果报告如下。临床资料:患儿年龄3~6岁,平均4.2岁,阴道异物致阴道出血就诊3例,排尿时哭闹、
<正>鼻的形态与面部整体的美丑关系甚大,隆鼻术是整形科常见的手术。隆鼻术是使低平的鼻梁和鼻头突起的手术,隆鼻的材料有象牙、人工骨、硅胶假体、自体肋软骨、自体耳软骨等
众所周知,世界上每个国家请客人吃饭都有自己的传统和习俗。在人类漫长的历史中,无论在中国还是在西方国家,宴客现在都已成为一种重要的社会交往方式,同时也是人际交往中必不
随着现代新课改的不断深入,全国各地的高中院校都在教学方面作出了相对应新课改的改革。其中对高中数学这一科目极大程度上运用了实验来进行教学,在这一过程当中我们为了促进
教学目标:1使学生认识长方体、正方体、圆柱和球;知道它们的名称,会辨认这几种形体及其图形。2.感知平面与曲面,培养学生的动手操作及观察能力,初步建立空间观念。
<正>目前精子冷冻和胚胎冷冻技术比较成熟,但卵母细胞冷冻,尤其是玻璃化冷冻仍处于应用的初级阶段。将卵母细胞冷冻技术、胚胎冷冻技术结合运用并获得成功妊娠更是困难。据检
随着时代的发展,职业教育的要求也越来越时代化、市场化,职业学校培养的学生要具备职业态度、职业精神以及职业技能,在教育教学中时时以这一要求作为教学标准。而茶艺这门新