云平台下分布式文件系统评测技术研究

被引量 : 0次 | 上传用户:shifujia
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着云计算技术的不断发展和普及,云存储的概念也应运而生,而分布式文件系统是云存储的核心基础,承载着数据存储的重任。另外一方面,随着社会信息化程度的提高,对于信息和数据的依赖性也越来越大,也就是说数据的可靠性越来越重要。而容错能力是衡量一个系统可靠性的重要标准,系统的容错能力越强,所能提供的服务也就越可靠。因此,对云平台下分布式文件系统的容错能力进行评测具有重要的研究意义。目前国内外对于云平台下分布式文件系统的研究成果中,关于性能测试与优化的有很多,而涉及容错能力测试的比较少,并且测试手段比较单一。因此有必要针对云分布式文件系统的容错能力测试进行深入的研究。本文通过对HDFS(Hadoop Distributed File System)和TFS(Taobao FileSystem)这两种典型的云分布式文件系统的体系架构、读写流程和内部的容错机制进行深入的研究,通过对比它们的相同点,提出了一套云平台下分布式文件系统容错能力测试方法。主要就是基于故障注入的思想,设计并实现了一套故障注入工具集,分别针对云分布式文件系统的节点和进程、文件和目录、数据校验机制、内部互联的网络进行故障注入,模拟现实应用中可能出现的各种类型的故障。为了验证云平台下分布式文件系统容错能力测试方法的可行性,本文搭建了一个小型的HDFS分布式文件系统,并以HDFS为例,进行相关的故障注入实验。通过观察实验现象和研究日志文件中记录的异常情况,来对HDFS的容错能力进行评测和验证,并对其中不足的地方提出可以改进的方法。
其他文献
本文从高职院校纪检监察部门推进“三转”工作的必要性出发,指出纪检监察工作主要存在的问题,提出高校纪检监察工作落实“三转”的措施和方法。 This paper starts from the
<正> 为了减少三自动穿筘机的坏车率,减少零件消耗,降低工人劳动强度,我厂对该机作了以下两项改进。这二项改进现已逐步推广使用。一、用三自动双向可控硅控制电路取代中间继
<正> G-176、G-177型穿筘机的三自动是由自动分纱器(履带式分纱器或螺旋分纱器)、自动吸停经片机、及自动插筘装置(G-176型为电磁铁驱动,G-177型为电动机驱动)组成。现就该机
高品位的幼儿园需要高素质的教师队伍。教师队伍素质的高低决定了幼儿园的兴衰成败。而园本培训是提升教师队伍素质的有效手段。园本培训以针对性强、灵活可操作的优势在实践
<正>随着甘肃蜂业的发展,江西省上饶市益精蜂业有限公司生产的业界品牌——"益精牌"蜂箱,被集中采购,大量进入养蜂主产区。由于易地生产、当地安装,在实际组装过程中出现了不
目的评价不同方式的椎管内分娩镇痛对子宫收缩持续时间和间隔时间的影响。方法选择在首都医科大学附属北京妇产医院待产,要求分娩镇痛的初产妇60例,采用数字表法随机分为腰-
工业区作为我国经济发展的重要基地,其基础建设融资渠道通常以财政支持为主。然而,随着工业区的高速发展和基础建设融资需求的提高,我国有必要寻找更高效的融资渠道。本文从
引发群众上访量增多的原因是多方面的,政府因素是其中不容忽视的一个方面,包括政府信访政策、措施方面的原因,政府信访体制、信访工作方面的原因,政府发展政策、干部工作考评
目的 对中央型前置胎盘剖宫产患者产后出血的危险因素进行分析。方法 对我院收治的40例中央型前置胎盘剖宫产患者临床资料进行回顾性分析,根据出血情况将其分为研究组与参照
王弼在其《老子指略》中,用“崇本息末”来概括《老子》的主旨。以“本末”来解读《老子》,是王弼的一大贡献。本末思想不仅是王弼解读《老子》的重要内容,也是王弼自身思想的重