大规模数据整合的难点与数据中心优化方向

来源 :网络与信息 | 被引量 : 0次 | 上传用户:zqzhang_1011
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
   随着全球企业再一次面对经济危机的阴影,各类提升自己企业效率和利润的对策被放在了首位。而IT基础设施作为现代企业不可或缺的信息技术支撑体系,也在云计算大潮下进行着如火如荼的转变。得益于无处不在的智能移动设备,IT接入方法摆脱了原有的束缚,海量数据应运而生;透过改善流程生产力,IT应用也更加注重改善流程生产力,为每个独立用户提供实时的洞察力;系统架构模式也由过去的异构孤岛向建立在工作负载优化系统之上的更整合与灵活的架构转变。
   那么企业在不断完善和简化自身IT设备的过程中都有哪些挑战呢?我们将在本文和后续的文章中逐一为您阐述。首先是企业要面对的大规模数据整合问题。
   据IDC统计,全球IT运维成本逐年攀升,到2012年接近2500亿美元,而全球服务器总量接近5000万台。与购买新服务器的成本增势平缓相比,服务器电力和冷却成本以及管理和维护成本在IT运维成本中的比重则逐年增加,而客户IT预算的增幅近年来却有不断放缓的趋势。另一方面,随着企业的高速增长,IT管理者们发现他们的数据中心正面临巨大的挑战:越来越复杂的系统环境,越来越高的来自于各个业务部门的数据服务需求,以及不断攀升的数据中心运营成本。面对这些挑战,企业愈发需要更加智能的数据中心支持企业业务的快速发展。
  
   大规模数据整合是通往云计算的必经环节
  
   有效地整合IT和数据中心设施的规划和执行,可实现数据中心持续的容量增长,有望使IT容量加倍,或者使运营费用降低高达50%。在绝大多数企业已经接受虚拟化技术的今天,用云计算和IT系统对于企业来说主要好处在于池化了计算资源,进而使得业务灵活性和计算资源的利用变得更方便。但是反过来,这也对数据中心本身提出了需求——既然使用方便了,那么最好在一定空间内尽可能多地叠加计算资源(以往受管理和应用手段所限,密度上去了也没法用)。
   在整合大规模数据的过程中,笔者注意到以下四个方面是企业CIO所在意的:
  
   1.高灵活性
  
   能够满足当前业务发展的需求,同时具备足够的灵活性响应未来未知的业务需求、技术和计算模型;数据中心的寿命长达10-20年。因此,任何公司都难以准确预测这段时间的需求,满足不可预测的业务、技术和计算模式需求变得非常重要,导致灵活性成为主要指标。
  
   2.高效运营能力
  
   充分实现高效的运营方式,优化资产,提升包括硬件、软件、其他支持设备和员工与流程在内整体数据中心运营效率。数据中心基础架构需要具有自适应能力,以便提高经济效益,同时降低前期购置和后期运营成本。这一点同时适用于IT和设施,企业需要提高资产利用率并且尽量推迟额外容量的购买时间。
  
   3.主动管控能力
  
   可以实现主动式监测和管理能力,提供针对数据中心运营的深刻洞察力,以满足对数据中心可用性、容量及能源效率需求。企业需要使用更多的软件管理工具将自动化和智能融入到日常运营中,以便积极监控和管理环境,专注于满足业务增长提出的可用性、容量规划和能源效率需求。
  
   4.端到端的服务能力
  
   可以为企业提供端到端的数据服务,全面支持业务发展的需求,推动企业业务的高速发展。
  
   X86已经成为服务器的主流平台
  
   而为了解决以上四个方面的大规模数据整合需求,CIO们就需要确定数据中心该如何优化。从目前来看,如果企业不打算翻新数据中心的话,那么在选型服务器和云计算建设方面需要加以注意。
   首先是服务器选型,当前最为普及的服务器标准就是x86架构,它承载了最多的企业应用,因此也适用于最大数量的企业。在云计算的部署中,基础平台的同构性非常重要,它将大大简化管理层的难度,你可以想像一下一个云计算平台如果是x86与RISC系统(俗称小型机)混搭的环境,那么在管理上的难度显然大于单一的x86环境,而且在资源共享方面也将遇到很大的问题。
   此外,x86上的虚拟机或工作负载很难迁移到RISC系统上,反之亦然——这其实是与云计算的全资源池化共享的理念是相悖的。有人可能会说,RISC系统在企业关键业务承载方面仍然有不可替代的优势,不过如果仔细观察现有的服务器市场,x86服务器已经在 RAS(可靠性、可用性与可服务性)方面有了长足的进步,由此也带来了明确的性价比的优势,比如英特尔最新的至强E7平台已经在很大程度上起到了可替换传统RISC系统的作用。
   最重要的一点在于,高RAS特性的高端x86服务器与中低端的x86服务器,可以组成一个共享的资源池,可以根据需求,在特殊的情况下来迁移相应的虚拟机与负载(这个负载不见得就是关键业务,也可以是数量庞大的前端应用,比如虚拟桌面),来为客户提供好的服务。这一点是RISC系统所不能比拟的,因此在整体的云计算架构搭建中,我们绝对有必要认真考查自身的应用水平,着眼于未来的资源最大化共享与灵活供给来挑选平台,而不能孤立地将应用拆分。
   其次,就是服务器平台的虚拟化性能——大规模数据整合为池化资源的重要手段就是虚拟化技术。虚拟化也可以说是云计算理念得以最终实现并顺利发展的根基性关键技术,它可以将多个分立的物理资源虚拟为一个整体的资源池,不同的应用可以根据各自的需求从池中索取相应的处理资源。从这点可以看出,虚拟化性能的优劣,虚拟化技术的丰富与完善性以及虚拟化技术的业界支持度,都将对平台最终的虚拟化效率与表现起到决定性作用。当我们选择标准化的x86平台后,就要考虑相应的虚拟化架构的区别了。
   从目前来看,英特尔为x86服务器平台提供了最为完善的虚拟化技术支持,并借助于其至强处理器本身强大的性能,提供了x86服务器平台最高的虚拟化水平。这其中,英特尔提供了三大类别的虚拟化技术,分别是处理器虚拟化辅助技术VT-x,服务器平台虚拟化技术VT-d以及服务器网络互联虚拟化技术VT-c。
   VT-x保证了处理器在虚拟化环境中的效率,通过多项硬件辅助技术,将虚拟化的CPU占用降到最低的水平,比如虚拟机的迁移、内存地址列表的寻址、针对多台虚拟机的CPU队列排序等等。
   而VT-d则打通了虚拟机与服务器外设之间沟通的桥梁,以往每个虚拟机都要通过虚拟机管理器(VMM)来调配对外设的访问,VT-d的出现可以让虚拟机各自拥有直接与外设沟通的能力,从而大大提高了平台虚拟化的整体性能,最大限度保证了在虚拟环境下的整体性能。
   VT-c则将物理网卡进行虚拟复用,使得每个虚拟机虽然共享一块网卡,但各自都有自己独立的“直通虚拟网卡”,这在大规模虚拟机并发访问网络时,效果立竿见影,并且可以更有效率地帮助虚拟机并发迁移,为云计算提供了更灵活的基础资源调配能力。
   VT-x与VT-d和VT-c的结合,为英特尔的至强服务器平台提供了加强的虚拟化支撑能力,这也是目前在x86领域只有英特尔能做到,也因此让至强平台获得了业界最大限度的支持,包括VMware、微软、思杰、红帽在内的主流x86虚拟化提供商,都对英特尔的虚拟化技术提供了全面的支持,这也直接带来了更高一级的虚拟化资源管理层对至强平台完善支持的保证。
   另一方面,英特尔为至强平台也提供了强大的电力资源的管理技术支撑,结合英特尔自身的能耗管理技术与标准化控制软件开发接口,用户可以方便地将英特尔平台物理能耗的管理纳入到自己的综合管理体系中来,与强大的虚拟化技术支撑相配合,这对于云计算整体管理的好处显然是不言而喻的。
   因此,可以看出,要面向大规模数据整合,CIO们不但需要在服务器选型上做成本和应用兼容性的考量,还需要为未来云计算和池化资源选择合适的服务器平台。
其他文献
美国智能手机用户数占比50.4%  5月8日消息,据尼尔森调查显示,到今年3月,美國智能手机用户数占比50.4%,超过了非智能手机用户数。  智能手机中,Android成为第一大系统,占比48.5%。iOS系统排第二,拥有32%的份额。去年12月时,美国智能手机用户占比47.8%。  报告还认为:在美国的亚洲人使用智能手机的比例为67.3%,西班牙裔人群57.3%使用智能手机,非洲裔人群54.4%
期刊
5月3日消息,据国外媒体报道,iPhone可能占据整个手机市場份额不到10%,但是即使是这么小的市场份额,苹果也主导着该行业的利润和收入。  根据来自市场调研公司Asymco分析师霍拉斯·德迪欧(Horace Dediu)的数据,在今年第一季度苹果在手机行业的收入份额上升至整个行业的40%多,创造出该公司历史最高记录。  更引人注目的是,如今苹果的利润几乎占据整个手机行业利润的四分之三(73%)。
期刊
5月9日消息,据eWeek网站发表的一篇分析文章称,许多新的智能手机将上市。这些智能手机将有许多吸引消費者的同样的功能,为移动行业带来迅速的技术进步和激烈的市场竞争。在2012年,大多数智能手机将有10个重要的功能:4G LTE、4英寸或更大显示屏、最新的OS风格、取消物理键盘、单个运营商的支持、更低廉的价格、四核处理器、NFC功能、32GB存储、改善的照相机。
期刊
近日,百度地图PC端推出室内图查询功能,上线6000条室内地图信息,是国内首个拥有室内图查询的互联网地图。覆盖了学校、商场、医院、电影院、风景区等各个主流生活地点。据悉,百度地图未来还将在移动端进行该功能的复制和升级,并逐步提供室内导航、室内商户检索、及时推送商户优惠信息等服务,最大程度发挥地图在各终端的入口作用。  百度地图的这一全新功能对于LBS行业以及广大的第三方开发者来说,尤其重要。经过前
期刊
5月14日消息,中国移动飞信新版本将支持中国联通、中国电信的手机号注册,这比此前开放异网短信和支持邮箱注册在互联互通上更近一步。  据了解,中国移动飞信即将发布“晨曦版”,与以往相比,此版本支持非移动用户开放注册,中国联通和电信的手机用户可直接使用手机号注册。  目前,飞信2012晨曦版中的“开放注册”功能为体验阶段,飞信将会基于“开放注册”体验阶段的用户反馈对功能进行完善及优化,力求在最短的时间
期刊
据美国媒体报道,美国新泽西州利堡镇近日推出新法规,行人在街上边走边发短信将被罚款85美元(约合人民币536元)。  利堡警察局局长托阿莫斯·黎波力称,“发短信会严重分散注意力,行走時发短信的人根本不看、也不知道他们正走向什么方向。”  黎波力称最近在其居住3.5万居民的辖区内,发生了3起行人死亡的交通事故。他希望这一法规的引入能有效打击会在路上做出危险行为的人,使辖区变得更安全,新法案的意图并不在
期刊
物业费也能用支付宝缴了!5月15日,支付宝又开通了一项便民缴费服务,深圳万科、杭州南都、金成物業成为首批开通支付宝缴费的物业公司,这三大物业旗下11个小区的业主可以通过支付宝7×24小时缴纳包括物业服务费、车位费、公共能耗费等多项综合物业费用。  据悉,支付宝还将推出物业费签约代扣的功能供业主选择。除了首批开通的物业小区之外,支付宝已与绿城物业等大型物业集团达成合作意向,接下来,将有更多市民享受到
期刊
继推出ipad个人网上银行和iphone手机银行后,工商银行近日又正式推出了苹果电脑版个人网上银行。  苹果电脑版个人网上银行的推出,使得工行在国内同业中首家实现了对苹果全系列产品的服务支持。据介绍,工行苹果电脑版个人网上银行与基于Windows平台个人网上银行的功能完全相同,操作体验也基本近似,同样具备丰富的產品服务和有力的安全保障,并且可以很方便地使用账户管理、转账汇款、在线缴费、基金买卖、国
期刊
摘 要:虚拟化技术的出现,是信息时代的重大变革,它为企业增强生产力,提高资产利用率,并有效地管理企业运营环境提供了很好的支撑。云计算的出现则为信息技术领域带来了新的挑战,也为信息技术产业带来了新的机遇,本文从概念出发系统地介绍了虚拟化技术的分类、优点等内容。  关键词:虚拟化技术;服务器虚拟化;存储虚拟化  虚拟化技术始于20世纪70年代,是指计算元件在虚拟的基础上而不是真实的基础上运行,是一个为
期刊
在Win7系统中,将窗口移到屏幕左侧或右侧边缘,就可以讓窗口停靠在屏幕一侧,并自动占满半个屏幕;将窗口移到Win7屏幕顶端,就可以自动最大化显示,很方便。不过Win7系统这个华丽的功能并不是所有用户都喜欢,因为它有时会妨碍用户正常浏览系统桌面上的内容,进而影响工作效率。
期刊