虚拟化技术中的存储管理问题研究

被引量 : 0次 | 上传用户:xiaodong0814
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着CPU、RAM、磁盘阵列、高速互连网络等硬件技术的发展,以及以虚拟化技术、并行计算和分布式系统等软件技术的发展,网格计算、效用计算、服务计算、云计算等新兴计算模式不断涌现,并得到了迅猛发展。虚拟化技术提供的服务整合、资源动态分配技术、增强的安全隔离等特性可以很好地解决这些新兴计算模式所遇到的安全隔离、资源分配等问题。与此同时,随着全球数据信息量的持续爆炸性增长,企业和个人对数据存储空间的需求也越来越大,用于购买存储设备的支出、以及存储设备在总的IT开支中的比例也不断增大。但是一方面是快速增长的存储设备开支、较高的设备能耗,另一方面却是较低的存储空间利用率,这些都对存储管理技术提出了新的需求和挑战。为此,出现了自动精减配置、空闲空间回收、重复数据缩减、基于云计算模式的云存储等许多新的存储管理技术和存储服务模式。云存储模式同其它云计算一样,基于虚拟化技术,通过整合众多异构、廉价的服务器和存储设备,构建众多的虚拟化的实例,为企业和个人用户提供持续不断的应用和存储服务,不仅可以满足广大中小企业和个人的计算和存储需求,而且也有效地减少了中小企业的存储开支和能耗。但设备开支和能耗压力又转移到了云存储服务端。自动精减配置是目前许多存储管理产品都具备的功能,基于存储虚拟化技术,减少每个虚拟卷的初始配置大小,仅在必要的时候才进行扩展,以此来提高存储空间利用率。因此在云存储服务端结合自动精简配置技术管理存储资源,以有效提高存储利用率,应是云存储服务端存储资源管理的重要趋势。虽然自动精减配置技术可以大幅度提高存储空间利用率,但是由于大量的文件删除等操作,虚拟卷中仍然存储大量的空闲空间无法利用。目前仅有较少的几种自动精减配置技术配有空间回收技术,而且其中有许多都是要在迁移时才能进行空闲空间的回收,因而广泛存在回收效率不高、影响用户使用、应用范围狭窄等缺点,在实际使用时无法真正有效地回收利用空闲空间。本文针对目前云存储系统中存在的提高存储利用率的需求,扩展了自动精减配置技术,提出一个虚拟存储在虚拟机间按需动态流动模型(Virtual Storage Flow on-Demand, VSFoD)。该模型将一台服务器拥有的所有存储资源都整合到一个统一的存储池中,从存储池中创建逻辑卷,作为每个虚拟化实例所拥有的虚拟存储空间。基于该模型,虚拟存储空间可以根据需要动态地扩展;另一方面,当整体存储空间紧张时,为了响应其它虚拟化实例的虚拟存储空间的扩展与创建需求,也可以收缩某一虚拟化实例所拥有的虚拟存储空间,回收其一部分空闲空间;若回收了空闲空间后资源仍然紧张,则可以向网络中的邻居节点请求共享邻居节点的空闲空间。即存储空间可以由一个空闲空间较多的虚拟化实例“流”向空闲空间紧张的虚拟化实例。由此,该模型比起现有的自动精简配置技术,更能有效地提高存储利用率,进而降低存储开支和能耗,也更加适合于云存储模式。Xen是一个拥有较高性能的开源的服务器虚拟化技术,许多企业的产品和科研项目都基于Xen,包括在业界非常有代表性的亚马逊(Amazon)公司和EC2(弹性计算云)和S3(简单存储服务)。本文中实现的VSFoD模型的原型系统也是基于Xen。在原型系统中,本文首先改进了现有的逻辑卷管理器,使其能够考虑到各个物理存储设备的性能差异,提高逻辑卷的读写性能,实验结果表明,应用该改进方法,可以显著地提高所创建的逻辑卷的读写性能;另一方面,能够在创建逻辑卷时,可以指定所映射的物理存储区域,增强逻辑卷管理器的管理功能。然后,本文改进了Xen的虚拟块设备管理,使得扩展或收缩某一虚拟块设备后,它所在的虚拟机能够感知其大小的变化。否则,只能重启Xen虚拟机才能更新它的虚拟块设备大小,而这样就会影响到用户的数据访问操作。此外,本文也给出一种更加适合于Xen等虚拟化环境下的虚拟机间IO性能虚拟化方法,以保障各个用户之间对服务器IO带宽的公平共享,避免相互影响。实验结果表明,比起Xen中原有的IO调度方法,这种性能隔离方法,可以有效地保障各虚拟机间公平地共享磁盘IO带宽,也能够根据不同虚拟机的权重,为各虚拟机按比例地分配磁盘带宽。为了使用户能够感知并正常使用动态变化了的虚拟块设备,必须使文件系统的大小与之匹配,并尽量降低对用户读写操作的影响。本文最后给出了一种对Linux系统中最常用的也是默认的ext2/3文件系统进行在线收缩的方法,并给出了在Xen虚拟机中实现ext2/3文件系统在线收缩的方法。实验结果表明,该方法可以正确地收缩文件系统,并且不阻塞用户读写,对于读写性能的影响在最坏情况下也只有5%~10%。
其他文献
中低温固体氧化物燃料电池(LITSOFC)将SOFC的操作温度降低到400~800℃,解决了传统SOFC因温度过高带来的材料选择、制备等问题,成为近年来SOFC研究领域的热点。本文从一种氧离子/
随着教育改革的发展,高职院校以其自身独特的专业设置得到了社会的肯定,学生人数和学校规模都在不断扩大。高职院校体育课程是我国全面发展素质教育的重要组成部分,又是学生
本文以余姚供电公司在输配电价改革的大背景下开展的工程财务管理变革实践为例,以项目过程管理为主线,推行工程财务管理“系统自动化+岗位职责重塑”两大管理策略,不断提升工
<正> 一、集团公司集权式财务管理体制的框架设计 1.集团母公司的财权配置集团母公司分割财权的主体是董事会(或经理办公会)——总经理——财务副总经理——财务经理(财务部)
《史记》是我国古代的第一部纪传体通史,它开创了为经济立传的先河。司马迁在《史记·货殖列传》中阐明了他的经济观点,在承认人的趋利本性的基础上,主张国家应顺应经济规律,
在线实践社群作为一种独特的知识组织形式,在发展过程中面临着如何吸引对社群主题感兴趣的人加入到社群中,并积极参与社群的实践活动以创造出相应价值的问题。目前国内外学术
虚假民事诉讼作为一种新的恶意利用法院和规避法律的手段,在我国无论是实体法还是程序法中都尚未得到明确的规定,诉讼法学界对这一问题的研究也尚处于起步阶段。伴随着理论上
在全球性金融危机,多年不遇的各种自然灾害的严重冲击下,出口下降,经济下滑,经济发展面临诸多困难,拉动内需乃必然选择。扩大内需的重点之一在农村,而农村的重点又在农业发展
化工生产的这些特点决定了其具有易燃、易爆、有毒、有害、腐蚀性强等许多潜在的危险因素,安全生产的难度较大。随着经济的不断发展,对化工产品的需求量日益增加,化工生产的
视听资料作为一种新型科技证据,被广泛运用到诉讼领域,在诉讼的证明活动中发挥不可替代的作用。虽然我国民事诉讼法确立了视听资料独立证据种类的地位,但是视听资料的规定还