基于随机编码的高性能存储容灾技术的研究与应用

来源 :中国科学院大学 | 被引量 : 0次 | 上传用户:yanyingguilai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息技术的不断发展、互联网的普及,以及企业和个人对信息技术的广泛应用,极大地促进了数据量的增长,进而导致存储系统规模的不断扩张,对大规模存储系统在容灾能力和存储成本之间的权衡也提出了巨大挑战。但是,现有的存储容灾技术均存在种种不足之处,如:存储空间利用率不高,参数受限,容灾能力较低,或扩展性不强等等,无法满足大规模存储系统的容灾存储需求。  针对上述问题,本文提出利用有限域GF(2)上随机矩阵高概率满秩性质设计存储容灾方案的新思路,通过分析两类随机矩阵(均匀随机和稀疏随机)的相关性质,提出两类存储环境——RAID存储系统和分布式存储系统中基于随机编码技术的容灾存储设计方案。本文的研究成果主要包括以下几个方面:  1、针对现有基于编码思想的存储容灾技术,分析其编译码构造方式,发现其编译码矩阵具有满秩的特点,以及其校验矩阵中任意t(t为容灾能力)行子矩阵均满秩的性质,从而提出通过设计满足上述共性的矩阵来构造相应编译码方案的思路,并利用有限域GF(2)上的随机矩阵进行相关尝试,得到了基于随机编码技术的存储容灾方案。  2、为了满足RAID存储系统对容灾能力和扩展性方面的需求,将随机编码技术应用在RAID存储系统中,并提出分别基于传统磁盘阵列模式、扇区-磁盘模式以及混合编码模式的RAID编码构造方式,以应对不同的RAID存储环境和容灾需求。该随机阵列码(R-RAID)方案较传统阵列码技术具有灵活的参数设置,进而具有更高的容灾能力和扩展性。  3、为了提升大规模分布式存储系统的容灾性能和存储空间利用率,本文将随机编码技术应用到分布式存储系统中,并分别设计了单节点容灾和多节点容灾情况下的编译码方案。该方案较现今的多项式插值方案具有更高的编译码效率,而较现今的通信编码方式,又具有较高的存储空间利用率。  4、针对企业用户对数据安全性的需求,本文进一步提出了安全分布式存储方案(S-SREC),通过将原始数据与冗余数据分离,企业用户自身存储原始数据信息,而将不呈现原始数据信息的冗余数据交付给不可信的第三方存储容灾系统进行容灾,从而一方面避免了原始数据泄露的风险,另一方面,企业用户也可利用冗余数据快速恢复原始数据,实现原始数据的容灾存储。
其他文献
关联规则(association rules)在数据挖掘是一个重要的研究内容.而产生频繁集(frequent items)则是产生关联规则的第一步.在大多数以前的实现中,人们普遍采用了类似于Aprior的
态势评估根据功能划分为态势觉察、态势理解、态势预测三级,由态势元素的层次性,可以使用多级多层黑板模型构建态势评估系统.态势觉察为高级态势评估过程提炼态势元素,涉及到
通过对当前多模式匹配理论厂泛而深入的研咒,提出了一套针对入侵检测系统的多模式规则匹配方法,并在Snort系统(规则匹配NIDS的典范)上加以实现,实验结果证明改造过的Snort系统的模
随着全球信息技术飞速发展,信息化水平不断提高,中国的科研管理系统信息化要求与日俱增,而目前中国科研管理系统以单机版为主,该项目就是研制基于互联网科研申报评审系统.该
学位
随着医学影像技术的快速发展,超声心动图在心脏疾病临床诊断中起着越来越重要的作用。如何方便快捷地辅助医生从海量的医学影像数据中获得有价值的心脏疾病临床诊断信息,一直是
本文所作的工作主要分为提高浮点运算性能与可配置性两方面:1. 增强性能方面:针对浮点操作中频率最高的浮点加减法,详细分析了当前流行的硬件电路实现算法(2-path算法与单通道算法
随着近年来人们对智能监控系统的要求更加智能化和实时化,智能交通视频监控技术越来越受到研究人员的关注。交通视频目标跟踪是机器视觉领域一个重要的研究课题,它是智能视频监
该文结合宝钢"冷轧连续退火炉炉内带钢状态监测系统"项目的设计和实现,对数字图像处理技术以及视频监控技术的研究方法与研究现状进行了讨论;并且分析了结合二者的特点和优势
在现实世界中存在着海量数据,因此如何处理这些数据并从中发现知识是具有现实意义的亟待解决的问题。随着信息技术的发展,数据挖掘技术已经越来越广泛的应用于实际的运用中,而贝