闪存数据库系统存储管理及可裁剪性研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:gaoliqiang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
闪存是20世纪80年代由因特尔公司和东芝公司发明的一种新型存储介质,相比传统的磁盘,它在I/O性能,抗震性,功耗,体积等诸多方面都具有明显的优势。所以近年来,闪存有逐渐替代传统磁盘的趋势,开始在各种移动终端,手持设备甚至大型数据中心得到广泛的应用。另一方面,传统的数据库系统性能出现了瓶颈,这主要体现在作为其存储介质的磁盘发展速度已经远远落后于CPU,内存等其他硬件的发展。由于闪存的出现,一种直观上有效的解决办法即使用闪存作为数据库系统的二级存储介质。但是有研究表明,直接将现有的数据库系统迁移至闪存,其带来的性能加速比远低于闪存相对磁盘的性能加速比。这是因为现有的数据库系统都是针对磁盘进行设计,而闪存与磁盘的物理特性有很大的不同,导致数据库系统中针对磁盘设计的一系列算法在闪存上表现并不令人满意,所以要充分利用闪存的性能,我们必须根据其特性重新设计数据库系统中的各核心算法。本论文主要针对数据库系统的存储管理,缓冲区管理以及事务恢复等方面进行了深入研究,同时由于闪存应用场景的广泛性,不同的应用场景对于数据库功能的需求也各不相同,所以本论文在如何实现数据库系统功能模块快速裁剪和定制方面也进行了一些试探性的研究。论文首先介绍了闪存的发展历史,然后针对两种不同的闪存类型:NOR型闪存和NAND型闪存,分析对比了它们在性能,应用场合等各方面的差异。存储管理是组成数据库系统性能的重要模块,本论文在现有研究的基础上提出了一种适应随机小粒度更新的闪存存储管理模式,该模式通过检测闪存块中数据页的更新模式,动态地分配日志区大小。能够有效地减少闪存的写入和擦除次数,延长整个存储系统的使用寿命。缓冲区是影响数据库系统性能的重要因素。由于闪存独特的物理特性,命中率一般不能再作为衡量缓冲区算法好坏的标准。在此观察上,论文提出了一种针对日志型闪存存储管理模式的缓冲区算法,它通过检测缓冲页面的冷热,延时写出热页从而有效地减少了闪存的写入和擦除次数,同时该算法中实现了两种日志打包算法,可以明显提高闪存日志区的空间利用率,进一步减少块擦除次数,提高了闪存的使用寿命。论文还为日志型闪存存储模型提供了一种简单快速的事务支持和恢复算法,该算法通过将提交日志和未提交日志分开存储,可以避免闪存块合并操作导致某些事务无法回滚的问题,同时由于不需要写全局事务状态日志,可以大量减少闪存写次数同时提高闪存空间利用率。最后在闪存数据库系统的快速定制方面,论文利用面向方面的编程模型,提出了一套基于横切代码位置的抽取算法,并给出了代码从OOP向AOP迁移的技术路线,实验证明该算法可以有效的实现横切代码分离,从而实现数据库系统的定制。本论文的主要贡献在以下几个方面:(1)提出了一种适应小粒度随机更新的闪存存储管理模型,通过检测闪存块的更新模式,自适应地调整日志区大小,有效地减少了闪存写入和擦除次数。(2)提出了一种针对日志型闪存存储模型的缓冲区算法,该算法通过对缓冲区的页面进行冷热分类,延时置换热页,有效地减少了闪存写入次数,同时结合两种日志打包算法,提高了闪存日志区的空间利用率,有效地缓和了日志区的碎片问题,提高了闪存的使用寿命。(3)为(1)中的存储模型提供了一种用于支持快速事务恢复的算法,通过将提交日志和未提交日志进行分离,可以有效解决块合并操作导致的某些事务不可恢复的问题。同时不再需要全局事务状态日志,节省了大量的闪存写操作。(4)利用面向方面的编程,定义了基于横切代码位置的抽取算法,给出了用于实现数据库系统可裁剪和定制的技术路线,并通过实验证明了该算法的可行性。
其他文献
以紫外杀菌灯(波长为254nm)为光源,研究了酸性红R在由蒙脱土KSF和H2O2组成的类Fenton体系中的光降解行为,研究了反应体系pH、H2O2浓度对偶氮染料酸性红R光催化降解的影响,分析
摘要:人才培養质量监控体系是确保人才培养质量的重要手段,本文针对大部分地方高校在教学质量监控体系的构建与运行上的不足之处,以广州医科大学为例,提出构建全方位、多元化的学校本科教学质量监控体系,为地方高等医学院校进行教学管理改革与实践提供借鉴。  关键词:教学质量;监控体系;全方位;多元化  中图分类号:G642.0 文献标志码:A 文章编号:1674-9324(2016)22-0072-02  中
对天然橡胶(NR)/丁苯橡胶(SBR)内胎胶配方进行调整:降低NR用量比例,调整补强体系和硫化体系。结果表明:NR/SBR并用比由60/40减小到50/50,胶料的门尼粘度较大,焦烧时间较长,加
目的探讨慢阻肺合并Ⅱ型呼吸衰竭患者应用限制性液体管理治疗的效果。方法选取我院2015年10月—2017年10月收治的慢阻肺合并Ⅱ型呼吸衰竭患者80例,根据随机数表法分为两组,对
<正>根据阿波罗登月过程的要求,以及考虑到各个飞行阶段的工作特点,登月舱,服务舱及指挥舱分别都有各自完全独立的姿控发动机系统,其工作原理分别示于图(1),(2),(3),(6),(7)。 三个舱
目的:中西医结合治疗小儿轮状病毒性肠炎的疗效分析。方法:选取本院门诊从2013年7月—12月接诊的160位小儿轮状病毒性肠炎患儿,用随机数表法采用随机数表法将160位患儿随机分
利用网络分布式存储系统存储大数据已成为数据存储技术的发展趋势。网络分布式存储系统通常由数量众多的存储节点构成,由于人为或自然灾难的不可避免性,或是存储节点本身的低可
以“现代集约持续农业”为指导思想,以保土、保肥为关键,开发与保护并重,在云南热区山地建立经济林或混农林业为主体的山地型农业生产体系。为实现定目标,必须加强领导,深入调查资
目的建立顶空气相色谱-质谱检测食品包装材料中10种残留有机溶剂的分析方法。方法采用GC-MS选择离子监测(SIM)模式进行定量分析。结果 10种溶剂在0.001~0.1 mg/m2浓度范围线
文章主要运用文献资料法、问卷调查法与数理统计法,以"绳梯"训练对初中生耐力素质的影响为研究对象,通过实验前后数据的对比与分析。相比较之下,利用软梯训练初中一年级学生