虚拟存储——更经济有效的存储之道

来源 :互联网世界 | 被引量 : 0次 | 上传用户:kb824
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读



  Internet时代,随着信息成为生产力的核心,企业对信息的存储与管理需求正在飞速地增长,存储设备正在从服务器体系中独立出来,成为企业信息基础设施的中心。有调查表明,在未来的2~3年之间,75%的公司会重组以支持存储的这种改变。
  现在,越来越多的企业发现,在数据的存储和管理方面面临着两大难题:一方面,随着数据的爆炸性增长,企业在存储设施方面的投资正在急剧膨胀。据IDC调查,到2003年,未来存储将占据企业75%的IT预算,而且客户的大容量存储的要求每年都会翻一番,存储市场正在成长为比服务器更大的市场。另一方面,数据每年成倍增加,管理费用也成倍增加,同样根据IDC的调查,用户每投1美元在存储上,就再得投入8美元用于管理。有一件事是肯定的,企业都有存储并保护数据的需求,IT部门被要求既要节省费用又要满足它的需求。而按照传统的存储管理方式需要投入大量的人力和时间并需要不断增加昂贵的物理存储容量。这就象是一个无底洞,更多的数据意味着用户需要购买更多的存储容量,而更多的存储容量又意味着更大的管理难度和成本。
  因此,如何有效地利用现有的存储容量以削减物理硬件投资,简化管理以降低运营维护成本成为当务之急。虚拟存储技术的出现和应用将有助于企业实现这一目标,作为存储技术未来的发展趋势之一。业界分析人士认为,到2003年,90%的公司会将存储虚拟化。那么,什么是虚拟存储?它又能给用户带来什么好处?
  
  虚拟存储技术的实质
  
  简单地说,虚拟存储的实质和核心就是使用较少的真正存储硬件,但是表现为多个虚拟存储硬件。虚拟存储技术(StorageVirtualization)将物理上的存储设备和操作系统中的文件独立开来,在它们之间建立起一个虚拟层。虚拟层将文件系统映射到相应的存储设备上,并对存储设备进行管理。用户不再需要知道存储设备是如何配置的、它们在什么地方和容量有多大。
  比如,用户看上去是一个能够存储数据的容量为太字节的磁盘接在他的计算机上。而实际上,磁盘可能在网络上的任何地方,也可能由多个分布式磁盘组成,或者甚至是一个复杂系统的一部分,此系统包括了缓存、磁盘、光盘和磁带。数据存储在哪里是无关紧要的。即使容量非常大,用户所看到的也只是一个简单的磁盘。
  
  为什么需要虚拟存储
  
  对于用户来说,随着要存储的数据量的急剧膨胀,问题也显著增多:数据存储设备总是不够;访问它会很复杂;要充分利用它几乎是不可能的;并且作备份会很棘手……这些只是与数据存储有关的问题的一部分。
  利用基于网络的存储技术可以解决一部分的问题,因为它模糊了网络和本地资源之间的界限,配以合适的一层硬件和软件支持,就有可能使网络资源看上去是本地资源,因而散布在网络各处的存储设备就如同是常驻在本地计算机上那样,能够被访问。这就有可能更充分地利用分布在局域网和广域网上的数据存储设备。但这同时也带来了新的问题:虽然网络资源看上去像本地资源,但并不一定会使利用网络数据存储变得容易,访问不同的存储设备仍有不同的协议,保持对各处不固定的以兆字节计的数据进行跟踪,是有困难的。随着向存储虚拟化方向转移,这些问题可能会迎刃而解。这是因为虚拟存储技术具有如下两个主要优势:
  1.更充分地发挥存储硬件的能力和提高存储效率,降低用户存储硬件开销
  目前存储业界面临的最大问题之一就是物理存储的效率非常低。现在用户为了保护数据,经常需要不断地建许多镜像和进行大量的备份工作,这需要占用大量的物理存储空间,针对这一问题的传统技术解决方案是增加更多的磁盘。现在大多数客户的情况是,在他们的磁盘中,只有30%得到了真正有效的利用,其他的都浪费到镜像方面。
  而虚拟存储技术允许客户以透明有效的方式在磁盘和磁带上存储数据,让用户对他们的存储空间进行更加有效的使用。可以说,虚拟化并不是一个新平台,而是一种新的方式,它为存储资源管理提供了更好的灵活性,可以将不同类型的存储设备集中管理使用,保障了用户以前购买存储设备的投资。
  2.削减总体存储的管理和运行成本,包括硬件费用、维护费用以及操作人员费用等
  虚拟存储提供了一个大容量存储系统的集中管理手段,由网络中的一个环节(如服务器)进行统一管理,避免了由于存储设备扩充所带来的管理方面的麻烦。例如,使用一般的存储系统,当增加新的存储设备时,整个系统(包括网络中的诸多用户设备)都需要重新进行繁琐的配置工作,才可以使这个“新成员”加入到存储系统之中。而使用虚拟存储技术,增加新的存储设备时,只需要网络管理员对存储系统进行较为简单的系统配置更改,客户端无需任何操作,感觉上只是存储系统的容量增大了。
  此外,虚拟存储技术可以通过管理软件,为网络系统提供一些其他有用的功能,如无需服务器的远程数据镜像、数据快照(Snapshot)等。
  


  虚拟存储的主要应用领域
  
  虚拟磁盘和磁盘阵列
  已经安装的一些虚拟存储系统是面向磁盘的,向用户提交一个像磁盘的接口,并可从多个网络磁盘中配置实际的存储。在讨论面向磁盘的系统中经常提到一个术语是存储池。
  从用户的眼光看,存储池就是一个存储设备库,用户可以从中申请不超过限定最大值的任何容量的磁盘空间。介入软件和硬件层的目的是管理不连在一起的磁盘空间,使它看上去和工作起来像单一磁盘一样。
  面向磁盘的范例除使用简单外还具有很多优势。当一系列异构网络磁盘的接口被统一时,系统管理员就有可能实施单一的政策,覆盖所有的数据存储。这也使实现单一的全面备份方案更加容易。这种虚拟接口有助于确保充分使用散布在网络各处的数据存储设备的全部容量。而且系统是可扩的:增加磁盘对用户来说是透明的。
  比如象康柏公司用于WindowsNT和Windows2000的StorageWorksVirtualReplicator,它能让用户将物理存储阵列分成与真正的磁盘类似的逻辑虚拟存储池。这样,系统管理人员能根据用户和应用的需求分配磁盘空间,使公司能根据自己的实际需求扩缩存储空间。StorageWorks的另一主要特点是“瞬态”能力,即了解虚拟磁盘的瞬时状态。管理人员可以利用瞬态特性来进行存储器备份或恢复工作,不必费时去拷贝存储器或使之脱机。
  另一个例子是美国存储(StorageTek)公司的VSA系列虚拟磁盘阵列,它的优势主要表现在两个方面:第一,用大量的硬盘组成单一连续存储空间的虚拟存储器,支持多个主机的并发访问;第二,把主机和物理存储器完全隔离,使主机看到的只是分配到的存储空间,并带有数据保护和数据镜像功能,而不必关心具体的存取操作。由于存储容量和主机的分配完全是在逻辑上进行的,这就带来了以下好处:
  *存储区可由多个主机共享(可支持48个不同平台的主机并发共享);
  *各主机所使用的存储容量可任意设置;
  *可跨越多个磁盘甚至整个磁盘阵列进行奇偶校验计算,从而将奇偶校验计算开销降至3%;
  *可根据需要随时增减物理磁盘;
  *可在数据集(而不是磁盘)一级设置数据保护和镜像级别;
  *可随时改变数据保护和镜像级别,不必进行任何硬件配置更改。
  *虚拟磁带
  面向磁带的虚拟存储方案主要是解决用户数据的备份问题。比如象IBM和StorageTek公司的虚拟磁带库系统。StorageTek公司大中国区市场总监老丞尉先生介绍说:“虚拟技术的引入为传统的备份工作带来了巨大的变革,它可以有效缩短备份时间,提高备份工作的效率,节省用户的投资,特别适合于象数据中心、金融、电信等业务种类繁多,需要频繁进行大批量备份作业的行业用户使用。”
  StorageTek公司的张红艳先生进一步介绍说:对商业用户来说,数据备份不是目的,备份的目的是为了恢复——快速恢复。而要实现这一目标,备份时必须采取特殊的方式,即所谓精细备份。比如象银行这样的用户,有很多种业务,一个业务对应一些文件,可能有几千上万个文件。传统备份方式是一个磁盘或一个卷备份,这样即使只有一个文件损坏也要把整个磁盘或整个卷的数据都进行恢复,难以做到快速恢复。因此精细备份把备份作业分得很细,每个应用更改的是哪个文件,只备份这个文件,这样恢复时只需要恢复损坏的文件,大大提高了恢复的速度。但这同时也带来另外一些问题,由于每个备份作业的数据量可能不是很大,许多的磁带空间被浪费掉了,并且由于作业数量很多,大量备份作业需要逐个排队等待磁带机空闲下来,备份的时间托得很长,传统的解决方法是买更多的磁带机,这意味着一大笔投资,同时配套的机房空间、耗电量也随之加大。
  采用虚拟磁带技术则可以有效解决这些问题。比如StorageTek公司的虚拟磁带库系统,它通过在主机和磁带库系统之间增加一组高速的磁盘缓存,并把他们仿真成多个虚拟磁带机驱动器。对主机来说,它看上去好像是把数据写到了物理磁带设备上,实际是中间的磁盘缓存,该缓存在数据写到备份的盒式磁带上之前处理数据,并最终把一个一个虚拟带迁移到物理的磁带上。
  这样做的好处主要有三个:(1)通过利用虚拟磁盘技术,可以根据备份文件的大小灵活地分配虚拟磁带的存储空间,大大节省磁带用量;(2)由于虚拟磁带机不需要象真实磁带机那样找带、装带,大大缩短了备份时间;(3)一个虚拟磁带库系统可以虚拟多个(比如StorageTek公司的产品可以虚拟64或更多个)磁带机,而其费用却比购买同样数量的真实磁带机便宜得多,可大大降低用户的硬件投资。
  *虚拟SAN
  虚拟技术目前也广泛地应用于SAN当中,据VERITAS公司的技术人员介绍:随着SAN备受关注,如何管理这种新的SAN网络成为存储管理软件的一大热点。对SAN而言,虚拟存储技术能够使最终用户很方便地使用、改变存储而不必去了解存储的生产厂商、位置和型号等。特别是对于现在越来越复杂的存储环境,企业为了管理好SAN的网络环境,需要雇用了解各种存储设备特性的专业管理人士。而采用虚拟存储技术,可以使在主机端对物理资源的管理变得很简单。
  由于当前用于配置和管理存储设备的费用比起购买存储设备的花费越来越昂贵,当一个公司采取高度集中的内部网结构,对存储容量和持续可用的需求越来越迫切。同时,由于每个管理员都需要了解许多产品的特性,有经验的管理员价格昂贵而且很少,导致公司管理SAN网络的成本上升。
  在这个时候,SAN结构已经和服务器结合得特别紧密,虚拟存储技术可以用于减少管理存储的费用。虚拟存储技术实际上是一个可以用来建立存储服务的平台工具。随着越来越多的厂商都在发展各自的虚拟存储技术,虚拟存储技术已经融合到SAN结构中的各个环节:如在主机端、存储子系统,甚至融合到了Hostbusadapter或光纤设备,主要分为如下几种:
  1.在主机端的虚拟存储
  一般是通过逻辑卷管理(VolumeManager)来实现虚拟存储技术。逻辑卷管理为从物理存储映射到逻辑上的卷提供了一个虚拟层。主机只需要处理逻辑卷,而不用去管理存储设备的物理参数,VERITAS公司的卷管理工具更是提供了软件RAID和在线变更配置功能。这种技术的优点在于它是基于可靠的技术如广泛应用的卷管理工具;主机文件系统与数据库结合紧密,允许在线调整磁盘容量,而不需要将数据库关闭;虚拟存储技术可以通过共享磁盘等集群的技术扩展到多台服务器。
  2.在存储子系统端的虚拟存储
  在存储子系统端的虚拟存储设备主要通过大规模的RAID子系统通过多个I/O通道连接到主机,智能控制器提供LUN访问控制,缓存和其它如数据复制的管理功能。这种方式的优点在于存储设备管理员对设备有完全的控制权,而且通过与主机系统独立开来,可以将存储的管理与多种服务器操作系统隔离开来,并且可以很容易地调整硬件参数。
  还有另外两种比较特殊的虚拟存储是“In-BandAppliance”和“Out-BandAppliance”也可以实现简化SAN的管理。
  由于通过各种虚拟存储技术可以降低SAN管理的复杂性,提高易用性并能实现高可用性。因此,当前的虚拟存储技术正在成为SAN上的一种标准。
  
  当前存在的主要问题
  作为一种新兴的技术,虚拟存储技术也不是尽善尽美,还存在许多问题,主要的问题就是:存储虚拟化可以用不同的方案或标准实现。目前,市场上还没有一种广为接受的标准,这就意味着,设备中使用什么——即软件层中或者有可能在硬件中有什么,取决于您所选择的供应商。虽然有朝标准化前进的动力,但无章可循。迄今为止,很多供应商把精力都放在分散的问题上,按他们的想法设计和制造虚拟存储系统。多数供应商考虑的一个问题是在不牺牲性能的情况下,存储虚拟化的目标是提供最充分的存储资源的利用。供应商还关心的其他重要问题是易用性和维护性。
  与SAN技术的情况极其相似,标准化的问题将直接影响虚拟存储技术的应用前景,希望业界各方加强合作尽快妥善解决这一问题,使这一能为广大用户带来极大利益的技术得到广泛应用。
其他文献
继去年IT业爆炒网络概念之后,被誉为“新经济”的.com公司由于没有可赢利的支撑点而快速转向了衰败,今年的热门话题又换成了宽带网络。在互联网陷入低谷之后,宽带网络异军突起,不能不说为网络经济带来了新的希望。  本刊记者近日就上面这些热点及全向公司的业务发展方向等问题拜访了总经理李多女士。    宽带上网:高速+宽带    目前实现宽带接入主要有三种技术形式:以太网、Cablel Modem和ADS
期刊
随着全球电信投资热潮的减退,包括CISCO在内的一批电信级的网络设备供应商都饱受影响,股价下跌、市场萎缩、拆分、裁员,网络市场的寒冬来的既快又猛。而与此相反的是,国内一批企业级的网络设备厂商却正如沐春风。中国网络基础投资仍保持高速增长,中小企业迫切的希望加快企业网络化、信息化的进程,整个市场环境都给了网络厂商们一个欣喜的期待。一时间,台湾、本地品牌纷纷切入网络市场,狂躁与无序,迷茫与混乱,厂商和用
期刊
在纳斯达克指数迅速下滑和股市低迷徘徊的重锤之下,国内的互联网行业也开始感受到了前所未有的萧条,互联网经济的迅速衰退给国内刚刚起步的IDC市场带来了前所未有的冲击。而恰恰是在12个月前,著名的市场调研公司Salomon Smith Barney针对国内IDC市场的调查还在乐观地显示:2000年国内IDC的市场需求为1.3亿美元,到2005年,国内的IDC市场将达到7亿美元。从现在看来,被资本催熟的市
期刊
申办奥运会成功将带来大规模的投资,这将直接拉动经济的增长。为了成功举办奥运,中国将投巨资兴建体育设施,加强通讯系统建设,扩建机场,建设高速公路。除了投资的拉动外,相关产业的发展以及消费需求的增强,将给国内外投资商带来重大商机。北京市提出“绿色奥运、人文奥运、科技奥运”的目标,将使数字中国浮出水面。    光纤打造“光城”    为保证奥运通信水平与世界看齐,北京将建设六大通信工程:奥运光纤通信网将
期刊
随着Internet的发展,人们对于网络信息安全的要求越来越高,但几乎所有的Internet协议都没有考虑安全机制。从Internet上最通用的应用FTP、Telnet和电子邮件用户口令的明文传输以及IP报文在子网段上的广播传递就充分体现出来。因此Internet在安全性、可靠性等方面存在着先天不足。此外,Windows、UNIX等具有联网能力的操作系统,也或多或少存在着安全漏洞或“后门”,比如M
期刊
我国第一枚实用化的CPU芯片——“方舟—1”近日宣告诞生。它是国内第一个0.25微米、32位的CPU产品,可以广泛应用于网络计算机、手机、数字电视等产品领域。“方舟—1”由中关村一家留学生创办企业——中芯微系统技术有限公司用近三年的时间自主研制而成。  “方舟—1”的诞生使媒体喜出望外,一致表示过去我国信息产业的核心与基础——芯片长期依赖进口,成为我国经济和信息安全的隐患,也削弱了我国企业的盈利能
期刊
存储是伴随计算机产业的发展成熟起来的一个概念,可以说从计算机诞生的那一刻开始,存储也就随之诞生了。就好像一切事物发展的普遍规律一样,存储技术的发展与衍变也同样经历了一个从粗放发展走向细致分工的过程。  从存储技术的发展历程来看,存储基本上是以两条平行的轨迹延伸过来的,一条线是基于大型行业应用的“海量存储”技术的发展与成熟;另一条线是基于普通用户日常应用的“通用存储”技术的发展与成熟。长期以来,这两
期刊
在移动业务运营公司的经营中,维护、管理、建设、业务拓展、客户服务等各方面的工作都是紧密联系的有机整体。然而,由于一些原因,过去那种若干业务系统和地域系统独立运作的方式将这种密切的关系分割开来。移动通信市场竞争的加剧对系统的效率和成本控制提出了更高的要求,信息技术的发展则为进一步提高系统效率、降低运营成本提供了可能。BOSS(BusinessOperationSupportSystem)系统正是为解
期刊
随着经济的迅猛发展,城域网业务日益庞大,许多城市都面临着网络重新规划设计的任务。那么,在其规划中应该有哪些关键因素呢?我们不妨从下面几个方面进行分析。    城域网业务特点    与骨干网不同,城域网的业务有其鲜明的特点和复杂性。  首先,城域网上的业务流量可能远比骨干网业务流量要大。从业务流量的增长点来看,主导传输网络的业务随时间发展分别是语音,数据和图像。在过去语音业务为主的网络中,城域网的业
期刊
有人说:“如果整个商界真的可以一‘网’打尽的话,5年,或者10年之后或许真的不会再有公司被称为‘网络公司’。”现实也的确如此:传统公司和网络公司正在走向融合,网络新贵与传统公司之间的界线也越来越模糊。网络公司要充实传统业务,传统公司一方面需要运用网络来改造自身的运营模式,另一方面也有可能面向网络进行战略扩展甚至战略转型。  对Sony这个诉诸视觉的商标,大多数人会默认为是代表先进视听产品和娱乐服务
期刊