【摘 要】
:
在信息爆炸式增长的今天,信息即意味着价值,如何安全可靠的存储信息无疑备受人们的关注。云存储系统凭借其高性能、高扩展、高可用、大容量等特点而得到广泛的应用。云存储系
论文部分内容阅读
在信息爆炸式增长的今天,信息即意味着价值,如何安全可靠的存储信息无疑备受人们的关注。云存储系统凭借其高性能、高扩展、高可用、大容量等特点而得到广泛的应用。云存储系统通常结合使用三副本镜像机制和纠删码技术来保证其数据的可靠性及可用性,对于三副本冗余机制而言,当同一数据块的三个副本镜像同时丢失时,必然会造成文件的损坏,而如果增加副本数目则会降低系统的存储空间利用率;同时云存储系统采用的RS纠删码由于自身的编码特性,其在进行故障译码恢复时所需读取的数据块的数目是恒定的,如果能减少其在进行少量数据块恢复时的数据读取量,则不仅能加快其故障译码恢复速度,亦能降低故障译码恢复时的带宽占用量,从而提高存储系统的整体性能。本文正是由此出发,对其进行了深入的研究,最终基于Pyramid码设计了云存储容灾系统,其主要工作内容包括如下几个方面:首先,在不增加额外存储空间的基础之上,本文通过使用异或校验数据块对三副本镜像机制进行了改进,并将其称为高容错三副本镜像机制。当某些原始数据块的三个镜像备份数据块同时丢失时,其亦能恢复丢失数据块,因而和原三副本镜像机制相比,高容错三副本镜像机制的容错能力更强;同时校验数据块的计算仅使用异或运算,实现方式较为简单。其次,本文利用已有的Pyramid码代替云存储系统中通常使用的RS码,从而有效的降低了单条块故障译码恢复时的数据读取量,加快了数据读取速度,减少了故障恢复时的计算量。随着对纠删码技术的深入研究,本文通过增加1个本地冗余校验块对Pyramid码进行了改进,提出了一种初步的编译码方案,该方案降低了两块故障恢复时数据存储中心之间的数据传输量,加快了数据读取速度,且改进后的Pyramid码保持原Pyramid码的编码结构,因而增加了故障恢复的译码方式。最后,本文在Hadoop基础之上,使用高容错三副本镜像机制和Pyramid码,设计了云存储容灾系统。该存储容灾系统使用高容错三副本镜像机制编码存储热数据文件,使用Pyramid码对冷数据文件进行编码存储,同时根据用户对数据文件的关注程度,将存储系统中的数据文件划分为冷数据和热数据,定期扫描判断数据的冷热状态,并对冷热状态发生变化的数据文件进行相应的存储编码转换,以期在确保数据可靠性的前提下,尽量提高数据的可用性。最后,本文对云存储容灾系统原型进行了功能测试,分别对高容错三副本镜像机制和Pyramid码的故障译码恢复性能做了对比分析,测试及分析结果均达到了预期目标。
其他文献
目的:以蒙药沏其日甘-8前期研究结果为基础,建立动脉粥样硬化Wistar大鼠模型,并通过RNA测序技术探索沏其日甘-8动员骨髓血管干祖细胞促进血管内皮损伤修复的机制。方法:60只健康雄性Wistar大鼠,随机分为空白组、模型组、沏其日甘-8 A组、沏其日甘-8 B组、辛伐他汀A组、辛伐他汀B组等,每组10只。各组大鼠给予普通饲料适应性喂养1周。实验开始,除空白组外其余各组均给予高脂饲料喂养,自由饮
磁法勘探作为一种高效、快速、经济的地球物理勘探方法,在区域地质调查、油气和矿产普查等基础地质研究中一直发挥重要的作用,已成为国土资源调查、评价工作中的重要技术手段
自由边界问题是一类含有未知边界的其边界部分和解彼此相关并且必须同时确定的偏微分方程的定解问题。在自由边界问题中,不但要设置定解的条件,而且至少要设置一个含有自由边
马尾松(Pinus massoniana Lamb)属于松科(Pinaceae)、松属(Pinus),常绿乔木,广泛分布于湖南、贵州及广西等17个省、自治区、直辖市,是针叶树种中利用程度及经济效益都很高的优势树种,更是主要的采脂树种。松脂是由萜类物质组成的混合物,储藏在树脂道中,主要含松节油和松香,是我国重要的工业原料及可再生环保资源。本文以3月和8月两个时期不同产脂量的马尾松种质为材料,比较高、
当今流行的分布式存储系统(Distributed Storage System,即DSS)由廉价PC构成,其作为云存储的核心部分具有可扩展性强、高可靠性和构建成本低廉等优点。但是DSS中大量闲置节点
若尔盖铀矿田位于南秦岭成矿带的南端,主要矿床类型为碳硅泥岩型铀矿床,已列入全国第二批整装勘查区。已发现2个大型铀矿床,多处中、小型铀矿床。在充分搜集和整理前人资料及
目的(1)通过观察不同程度心理应激刺激下雌性小鼠体重、旷场试验及糖水偏好试验,证实心理应激小鼠模型制备成功,促排卵收集卵母细胞,检测卵母细胞内活性氧(ROS)浓度、超氧化物歧化酶2(SOD_2)、过氧化氢酶(CAT)、谷胱甘肽过氧化物酶(GSH-Px)m RNA水平,以研究不同程度心理应激对小鼠卵母细胞氧化应激水平的影响;(2)小鼠体内受精,收集受精卵进行体外培养,通过检测不同程度心理应激刺激后小
中国是产煤大国,也是消费大国,每年约有80%的煤被用于直接燃烧。煤及其燃烧产物中的有害或有毒微量元素会直接或间接的危害人类健康及人类赖以生存的环境。近年来,越来越多的
轴承强化研磨是一种新型的轴承强化加工方法,其集合了强化塑性、研磨微切削以及摩擦化学加工技术,通过强化研磨提高轴承沟道表面硬度,产生残余压应力,形成利于储油的微观“油
本文研究二维粒子输运方程的数值求解方法。首先利用离散纵标法将柱坐标下的粒子输运方程离散,形成线性方程组Ax=b。当系统比较简单时,传统的源迭代方法求解粒子输运方程收敛