基于Open-Channel SSD特性的LSM-tree键值存储研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:johnwangjohn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大容量固态盘(Solid State Drive,SSD)的大物理块应用趋势及3D NAND Flash技术发展,为数据存储管理带来了机遇和挑战。日志结构合并树(log-structured merge-tree,LSM-tree)键值(key-value,KV)存储针对随机写进行优化,提供高效的数据插入和删除,作为持久化存储引擎被广泛应用在数据中心。LSM-tree KV存储直接使用SSD块设备,两者本身都存在读/写放大。更为糟糕的是主机端和设备端管理上各自为政,系统读/写放大问题会进一步叠加,严重降低存储系统整体性能和SSD寿命。基于开放通道SSD(Open-Channel SSD)的LSM-tree KV存储系统为统一管理软、硬件资源,优化存储系统,减少读/写放大问题,提供了一种解决途径。设计实现了基于Open-Channel SSD特性的LSM-tree键值存储系统(LSM-tree based key-value Store System on Open-Channel SSD Features)简称LOSF。LOSF利用开放通道SSD感知上层应用语义信息的特性,对KV数据进行分类聚集管理,根据KV数据粒度和访问频度将key和value选择分离处理,形成由LSM-tree管理的小粒度高频度数据区和块管理的大粒度value数据区,提高数据回收的效率,减少写放大。对小粒度高频数据提出子块管理方法,采用动态预处理合并策略,降低每次合并操作的数据量,避免单次合并操作开销过大,有效地减少了数据反复迁移,减少写放大。对大粒度value数据利用MLC型3D NAND Flash边界SLC型介质的复写特性,提出复写位图区管理方法,减少数据回收时查询LSM-tree的开销,减少读放大。LOSF利用SSD发展的新特性,优化存储系统,减少读/写放大。测试结果表明,LOSF方案与同样是开放通道SSD的LOCS方案相比,在KV粒度较小时,读写放大分别优化了30.4%和29.5%,SSD平均擦除次数减少了23.5%,存储系统整体性能提升28.6%;在KV数据粒度较大时,性能成倍提升,优化效果更加显著。LOSF方案与主机端采用数据分类聚集的Wisckey-SSD方案相比,读写放大分别优化了35%和45%,SSD擦除次数减少达70%左右,存储系统整体性能提升了47%。
其他文献
大数据对存储系统的性能与容量等方面都有了更高的要求,数据中心多引入不同的存储设备以满足持续增长的性能与容量要求。存储设备间的性能差异使得存储设备负载和服务能力不
钢结构以质量轻强度大、工业化程度高、绿色环保并且具有良好变形能力等优势使其在桥梁和建筑方面得到了广泛的应用,钢结构的各部件之间可以通过焊接、螺栓连接和铆接等方式组合在一起。高强度螺栓连接作为螺栓连接的一种,以其拆卸方便,承载力大,弹性性能好,施工简便且耐疲劳等优点得到越来越多的重视。与此同时,虽然规范中关于高强度螺栓连接的破坏方式、扩孔大小对结构的性能影响也渐渐完善,但仍存在某些不足。目前,国内规
随着非易失性内存技术(Non-Volatile Memory,NVM)快速发展,基于非易失性内存的文件系统成为当前的研究热点,其中如何保证文件系统的一致性是非常重要的研究内容。现有的NVM文
随着分数阶系统的不断发展,分数阶的理论已经被广泛应用到不同领域中。分数阶系统具有比整数阶系统更好的参数特性,对于一些复杂的物理系统而言,分数阶系统能更好的提供系统
大数据应用的涌现,促使计算机提供更大容量的内存。传统动态随机存储器(Dynamic Random Access Memory,DRAM)容量受限,且功耗大,无法满足当前应用的需求。非易失性存储器(Non
2015年我国GDP总量增速保持在6.9%,总规模达到了676708亿元,占全球GDP总和的15.5%。国民经济的蓬勃发展使得人们可支配收入大大增加,对于自身生活品质的追求提升了人们对于健
在国家“绿色环保、节能减排”的政策和财政支持下,越来越多的大修改造采用冷再生技术,半刚性基层沥青路面逐渐发展成乳化沥青或泡沫沥青冷再生基层沥青路面。传统的半刚性基
彩礼返还制度是在男女双方无法缔结婚姻时,解决彩礼赠与者与彩礼受赠者对赠与的财物所有权归属争议的法律制度。研究彩礼返还制度对于维护婚姻秩序的和谐稳定、保障人民群众的合法权益、促进司法公正、稳定司法秩序有重要意义。我国彩礼返还制度主要规定于《最高人民法院关于适用<中华人民共和国婚姻法>若干问题的解释(二)》中,以登记作为彩礼是否返还的判断标准,男女双方未登记结婚的,彩礼一律返还,已登记且离
钢筋损伤是影响钢筋混凝土梁桥承载能力的主要因素。及时、准确且无损地检测出桥梁结构内部钢筋绝对应力工作状态以掌握其损伤程度,对桥梁整体承载能力的评定具有重要意义。
企业官网是受众了解企业的主要渠道之一,也是企业跟受众建立互动关系的重要媒介之一,它往往会将文本和图像结合起来传递信息。由于无形资产在年报中披露不足,中美制药企业选择在其官网披露部分无形资产,以弥补缺失。本文选取中美制药企业各十家,运用定量定性方法,在评价理论、视觉语法和图文关系系统指导下,对其官网无形资产披露语篇进行对比研究。研究问题有:(1)在文本部分,中美制药企业官网中态度资源分布特征的异同点