基于文件校验的重删可靠性技术和重删应用研究

来源 :厦门大学 | 被引量 : 0次 | 上传用户:gameboy13888
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
全球信息数据总量的剧增给存储系统的设计和管理带来了极大的挑战。重复数据删除作为一种节省存储空间占用的存储技术受到越来越多研究者的关注。然而由于重复数据删除技术不再存储重复数据块,而以指针代替,使得多个文件共享唯一的物理数据块副本,一旦该数据块损坏,这些文件都将失效,因此从一定程度上来说重复数据删除技术会降低存储系统文件数据的可靠性。为了保证重复数据删除存储系统中文件数据的可靠性,需要采取有效的优化方案来对系统进行优化。另一方面,重复数据删除技术能够有效地减少智能手机中写入到闪存介质中的重复数据,从而减少闪存介质的擦除次数,延长闪存芯片的使用寿命,因此可以提高智能手机存储系统的可靠性。基于文件的校验技术,提出了一种提高重复数据删除存储系统文件数据可靠性的优化方案Per-File Parity(简称为PFP)。PFP对写入到存储系统中的文件先进行定长分块,然后将所得到的分块进行分组,再对分组进行校验保护,最后将数据块进行去重存储。当数据块损坏时,PFP可以通过文件内数据重构和文件间数据重构两种方法恢复它,从而提高文件数据的可用性。理论分析和实验结果显示,相较于已有的两种重复数据删除存储系统可靠性优化的方案DTR(Deduplication-then-RAID,基于重删技术的磁盘阵列存储技术)和RCR(Reference-count based Replication,基于引用计数复制数据块技术),PFP对文件数据的保护效果更好,提高了重复数据删除存储系统文件数据可靠性。基于重复数据删除的智能手机可靠性优化研究,实现了基于重复数据删除的F2FS日志文件系统(简称为Dedupe-F2FS),从文件系统的层次消除重复数据的写入,减少写入到闪存介质中的数据量。根据从挂载Dedupe-F2FS的智能手机上收集到的真实负载进行测试评估,实验结果表明重复数据删除技术减少了智能手机存储系统中重复数据的写入,从而减少了闪存的擦除次数,提高了智能手机存储系统的可靠性。
其他文献
种群动力学是一门利用数学方法和理论研究生物种群发展规律的科学.起初,学者们研究种群的动力学行为都是通过建立确定性的数学模型.其中Lotka-Volterra模型是最早描述种群种间关系的数学模型.在此基础上,学者们提出了许多生态系统模型,并对这些确定性模型中种群的动力学行为进行了研究,取得了丰富的研究成果.然而,考虑到自然界中存在着不确定性和随机环境等因素势必会不同程度上影响种群的动力学行为,因此,
本文研究了一类Malmquist型差分方程亚纯解的唯一性问题及一类复差分-微分多项式的零点问题,推广了这两个问题的一些结果.首先利用Nevanlinna理论证明了一类更一般的Malmquist型差分方程亚纯解的唯一性,然后利用分析函数的零点与极点的方法,证明了n取一定值时,复差分-微分多项式取零点无穷多次,该结果可被看作Hayman猜想的微分-差分形式,得到的主要结果如下:定理1.2.1假设.f是
强弧有关的概念在模糊图理论以及应用方面发挥着重要的作用.本文主要引入模糊强弧子图的相关概念,并对其性质和直积进行了研究.首先,本文定义了模糊图的强弧子图,并基于模糊图中有关强弧的分类,进一步定义了两类特殊的强弧子图,即模糊-强弧子图和模糊-强弧子图,同时对这些模糊强弧子图的算法进行了探讨.在对这三类模糊强弧子图中弧的性质讨论时发现,对于模糊图,其模糊强弧子图_1中所有的弧均为_1中的强弧,其模糊-
动物大多从受精卵开始发育,通过细胞增殖和分化逐渐形成胚胎,继而形成胎儿,最终发育为成体。动物生长发育是遗传因素与环境共同作用的结果。对家畜的生长发育的研究有利于提
近年多级存储单元(Multi-Level Cell,简称MLC)技术的提出,使得NAND Flash的存储密度大幅增加,但同时也带来了更大的系统噪声,其中,内部单元间干扰(inter-cell-interface,简称
随着科技水平的提高和社会生产力的快速发展,汽车已然成为了日常生活中不可或缺的耗能必需品,考虑到石油等资源的消耗以及对环境的保护,越来越多的关注点投入到新型能源的开
金融市场中资产价格收益率并不服从正态分布,而是具有尖峰厚尾的特性,并且具有一定的偏度。基于正态分布假设下的金融模型由于没有考虑尖峰厚尾情况,往往会低估市场极端事件
随着分数阶微积分理论和应用方面的研究,Caputo-Katugampola型分数阶微积分也得到快速发展.从目前公开发表的论文来看,对该类型微分系统的研究主要以方程解的存在性和唯一性为主.本文研究了几类Caputo-Katugampola型非线性分数阶微分系统解的存在唯一性及渐近稳定性.首先研究了阶数∈(2,3)的非线性分数阶边值问题正解的存在性和唯一性.在Banach空间中,运用锥拉伸与锥压缩不动
近年来,我国一直处于房地产投资与市政基础设施建设的热潮之中,随着城市的发展,在土地越来越紧张的市区,地下空间开发已越来越常见,如高层建筑多层地下室、地下铁道及车站、
近年来,以闪存为代表的非易失性存储器(NVS:Non-Volatile Storage)在存储领域受到了广泛关注。凭借其高效且安全的存储特性,闪存已经在生活的许多场景得到大规模应用。闪存的