石油行业行业HPC聚焦三大要素

来源 :中国计算机报 | 被引量 : 0次 | 上传用户:shi0206lei
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  在最新一期出炉的HPC TOP500榜单中,中国榜上有名的系统半数都用于石油行业。从最早的向量式、SMP、大规模并行处理机等计算机,一直到现在的大规模通用集群,石油行业用户在高性能计算上始终走在应用前列,他们对新技术保持着很高的关注度和接受度。在前不久召开的石油行业高性能计算研讨会上,来自多个石油行业的用户与英特尔共话高性能计算的发展蓝图,就实际应用和技术趋势展开了探讨。
  
  把脉石油行业应用
  
  在石油行业中,高性能计算主要应用于石油勘探和石油的生产和开发,其中又以石油勘探的高性能计算应用最为突出,它多采用集群系统。石油行业用户对高性能计算提出的要求苛刻且具体,包括高性能系统要具有强大的硬件性能表现及能耗比、有优秀的开发应用软件技术配套、符合石油石化行业发展需要、符合开放标准,并且有广泛的合作伙伴支持。
  在高性能计算未被广泛应用时,石油勘探用时长,精确性低。要知道,一口井打下去,可就是千万元以上的成本,通过科学的物探方法,准确确定高产井位是节约钻井投资的有效方法。高性能计算在石油勘探领域的逐步普及,提高了勘探精度,也缩短了时间。
  地震勘探正是查明地下地质构造的最有效方法之一,与會的多位石油行业专家都提到了这种物探方式。简单地说,地震勘探就是用人工方法激发地震波,然后研究收集到的地震波在地层中传播的情况,来间接查明地质构造,用于寻找油气田或其他勘探目的。
  在交流中记者初步了解到,地震勘探的生产工作基本可分为野外工作、室内资料处理以及地震资料解释三个环节。从记录地面振动情况的数据出发,得到地震剖面图和地震波速度资料,进而绘制出反映某些主要层位完整起伏状态的构造图,这样的处理过程需要对大量数据进行快速处理,尤其是地震数据叠前时间和深度偏移时的海量数据计算。这就需要利用高性能计算机,对获得的原始资料进行计算,视计算规模,其计算时间甚至可长达几十天。
  常用的处理技术有地震叠前时间偏移、叠前深度偏移、叠前波动方程偏移等技术。这些常规的处理手段已有通用软件版本,大多是采用Schlumberger、Landmark等石油勘探应用软件开发商的产品,经软件处理后,原始数据可以用来进行地震成像、油藏模拟和计算可视化。
  根据应用软件的特性不同,它们对系统的要求也不尽相同,不仅仅需要处理器能提供足够的性能、浮点计算能力,有些应用还对内存带宽、I/O、图形图像处理能力比较敏感,依情况还可能会从大容量缓存、大容量内存中获益。石油用户与气象用户类似,他们对计算能力的要求是无止境的,在经济和技术条件允许的情况下,越高的计算能力意味着越低的投入和越高的产出。如今,石油行业勘探的建模精度在不断提高,这就对物理复杂度、计算规模和计算时间都带来了更大的考验。映射到技术角度,这种趋势就是对计算资源、浮点性能、内存带宽、I/O的要求进一步增加,同时能源成本也开始为行业用户日趋关注。
  
  从平台层面全面提升
  
  英特尔把石油行业用户关注的应用需求定义为性能三要素:浮点性能、内存带宽和I/O。为此,英特尔应用与系统工程中心高级经理Lance Shuler向与会者展示了英特尔的技术路线,他的专职工作就是领导英特尔软件与解决方案事业部的全球软件团队为石油行业提供支持。
  Lance Shuler介绍说,英特尔将这三个方面放在一个平台上考虑,保持相同或更低的能耗水平。其中,浮点性能提升是通过多核化来实现的,从单核、双核到四核,再到未来会推出的众核,英特尔用多核来实现高性能低能耗,而浮点性能的扩展性则需要用软件去配合,这就是英特尔的高级向量扩展(AVX)特性,可以理解成SSE的下一代。充分扩展的AVX向量从128bit增加到了256bit,增加了对指令的支持,可以在良好的能效状态下提供两倍以上的浮点运算。
  在内存带宽方面,英特尔早就引入了1600MHz前端总线,提高了25%的带宽。今年下半年,英特尔还将推出QuickPath互连架构及集成QuickPath内存控制器技术,并应用到采用下一代Nehalem微架构的至强处理器和下一代安腾处理器Tukwila中,这是英特尔自FSB问世以来的首次系统互联迁移。QuickPath采用点对点互连模式,这种技术将提供高达25GB/s的总带宽,比目前使用的其他互连解决方案高出3倍。
  为了应对I/O需求,英特尔亮出了SSD和PCI-Express的第二代和第三代。英特尔的SATA SSD将在今年下半年上市。用作企业级的SSD名为SLCA,这种基于NAND闪存的产品针对企业级RAS应用,强调出众的I/O性能,它可以被用作替代硬盘、硬盘缓存或替代存储,并通过内置软件的方式,提高其稳定性。在针对石油用户的实验当中,SSD用于有限差分计算,使用逆时偏移,有2~3倍的性能提升,百度在使用SSD后,内存成本也大幅度降低。目前最有可能存在的问题是其容量还较小,但记者从采访到的石油企业的与会代表处得到的反馈是,32GB~80GB的容量可以满足他们的应用需求。
  
  调优释放多核效能
  
  现场调查结果显示,石油行业用户当前最关注的主题词是Infiniband和多核,尤其是多核导致物理模型、业务模型的思考方向发生了改变,映射到算法上,就是从单核、多线程到现在的大粒度并行、算法并行和应用并行。由于性能开销等原因,虚拟化技术并未在勘探过程中得到应用。
  在具体的高性能计算集群搭建过程中,需要有专家来充分考虑处理器、内存、网络以及存储之间的平衡。在此基础上,还要认识到,软件才是未来处理器体系系统演进的核心,用户使用支持多核、众核和未来架构的英特尔软件开发工具、性能库,其统一编程模式会保持传承性,使开发快速、稳定的并行代码更容易,同时也不会因为硬件升级带来太大的软件工作量。
  软件的力量不容小视,它在释放多核效能中起着至关重要的作用。据英特尔中国高性能系统架构师张晓军介绍,从技术角度讲,要提高并行化计算程度,处理器远高于内存和I/O的速度。帮助用户通过优化工具提高模式的并行化程度,协调发展,性能还有很大的提升空间。国外已出现这样一种趋势,行业用户很少再进行常规的Benchmark测试,而是直接提出一些应用,由英特尔协助进行优化,分析应用。未来,中国的行业用户也将走上这条道路。
  行业用户在选择高性能集群时,通常首先关注性能指标。而每台高性能集群系统最初设计的建议大多是综合了目前应用实测结果,以及专家的经验给出的。通常情况下,由于实际测试需要的设备和工作量太大,所以用户大多是从已有平台的测试结果定性推测未来平台的性能。如此进行高性能计算系统的设计会与实际情况有一定偏差。
  为了更好地分析现有系统及预测未来应用所需硬件平台的实际性能,英特尔提供了全面的工具,以实现对应用软件的计算、通信和数据存储等多方面进行精细化的特征分析,并分析高性能集群系统的硬件系统特征,再将数据组合起来,以建立性能模型,再通过性能模型模拟并预测应用软件在未来硬件平台上的实际性能。采用这些工具,可以大大提高用户设计未来高性能集群系统的准确度。
  
  加速器不是万能的
  
  首次突破千万亿次的Roadrunner是目前最快的计算机,它的技术特色就是使用了双核处理器和协处理器,这是否预示着高性能计算的一种发展趋势?英特尔千万亿次系统架构师David Scott表示,他并不认为这是最适合向最广大的通用集群用户推广的技术路径,“混合架构在解决特定架构时有优势,在解决主流应用时,并没有明显优势。未来英特尔也不会走混合架构的技术路线”。
  David Scott解释说,推导加速器的加速比通常有偏差,大多数是针对单个CPU,或者单个计算内核而非系统整体性能。加速器的确可能在算法级别上获得较大的优势,它分解出算法中的某一部分,部署在特定的硬件上以加速计算进程。但现实的例子是,这种做法通常无法满足整个应用的加速目标。根据amdahl’s定律,在一个模式中,可以被并行化的只是一部分。
  David Scott表示,多核平台的性能并未被充分释放,软件调优还存在着较大的提升空间。石油行业用户是否认可使用加速器呢?记者从多家石油企业的总工处了解到,他们的认识与英特尔基本上是一致的,主要原因在于,加速器软件及其开发缺乏灵活性,混合模式采用不同编译器,缺乏开发标准,编程难度很大。不仅这类技术人才难求,而且后期的开发、调试、优化、设备升级换代等都存在较大困难,很难满足石油行业IT部署的要求。“如果同构和异构都可能达到,显然同构编程成本更低也更容易。”中石油东方地球物理公司的与会代表表示,如何用好多核才是他们当前最关注的。
其他文献
世通华纳、华视传媒和巴士在线这三家数字交通媒体在短短的三四年里迅速崛起,俨然成为新媒体三巨头,让各界侧目。它们为什么能成就王业?  业内人士将它们崛起的原因归结为以下几点:一是车载公交电视属于新媒体。而众多国内外资本早就想进入利润相当高的媒体行业,但囿于政策限制,所以资本就被挤压到新媒体形式行业。车载移动电视是最有投资价值的新媒体之一,自然备受青睐。二是车载移动电视这些年正处于普及时期,所有的运营
万全R150是联想为成长型企业、IDC主机托管及政府用户量身打造的高性价比2U单路服务器。R150具有数据安全、高可靠性、高可扩展性等特点,可以担当Web服务器、文件/打印服务器、网关服务器、基础架构服务器、小型数据库服务器以及数据中心的前端接入应用服务器等应用。万全R150的推出,填补了联想在单路机架式服务器市场段的空白,进一步丰富了联想单路产品家族,为联想成功迈向“入门级服务器市场占有率领先”
编者按:  Web2.0春风吹过,创造了附加的新概念,其中就包括CRM,造就了CRM2.0的精神支柱。那么什么是CRM2.0 ?2.0会以什么样的方式来改变传统意义上的CRM?这是一股转瞬即逝的旋风,还是开启CRM创新模式的生命之门?  PPG是一个2.0时代模式的缩影,这个神话帝国遇到的问题,从一个侧面反映出离开了CRM的Web2.0模式将难以持续。这又应了那句古话:“皮之不存,毛将焉附。”从这
邹作基认为,在中国市场上,政府、电信和零售业是BI应用最具潜力的行业。    商业智能(BI)近年来已经成了管理软件市场上炙手可热的名词。在数据爆炸的今天,各大企业的CIO们比以往面临更多棘手的问题,传统的数据库业务不能满足它们的需求,数据库市场上正在经历一场革命。2007年,Sybase发布了数据库、商业智能和移动商务解决方案三驾马车并驾齐驱的路线,这三者,也可以说是这场革命中最受人重视的三大武
国内某金融行业公司建设了一套业务系统来为公司的投资业务提供市场行情分析和风险控制。但在业务系统正式运行三年来,却一直备受性能问题的困扰。系统的优化改造始终没有停止过。但无论是采购更高性能指标的设备,还是从软件方面进行系统优化改造,收效都不明显。缓慢的系统,已经严重影响了公司的业务正常运转。  作为该公司的CIO,老A该如何选择有效的升级改造方案呢?    以性能评估分析为依据    公司现有设备是
与Novell在中国的合作预示着微软在中国的互操作战略获得实质性进展。对于张亚勤而言,接下来要考虑如何激活微软在虚拟化和高性能计算两大领域的巨大市场潜力。  当人们还将注意力放在微软美国洽购雅虎的进展之时,包括微软首席研发及战略官格雷格蒙迪(Craig Mundie)在内的数名微软高层却秘密从美国赶赴中国。他们现在更感兴趣的不是互联网,而是张亚勤给他们展现的微软中国软件业务新蓝图。  4月21日,
《福布斯》杂志最新全球富豪榜的发布,吸引了不少人的眼球。世界首富14年来的首次更迭,成为人们津津乐道的话题。  “股神”巴菲特由于所持的伯克希尔-哈撒韦公司股价大涨,身价猛增100亿美元,达到620亿美元,超过微软董事会主席盖茨的580亿美元,跃居全球首富。盖茨曾经13度成为全球首富,但今年滑落至第三位。位列榜眼的是墨西哥电信大王Carlos Slim Helu,其个人资产为600亿美元。分析人士
如果把卓越服务喻为枝繁叶茂的大树,那么知识资产就是大树成长中不可或缺的生命养分。  IT服务不仅需要待人接物的艺术,更需要知识体系的运用艺术。当今IT服务只有更多依赖知识资源与经验,将这种无形的知识与经验化为整个企业可以触摸、分享、传承甚至重复使用的有形资产,才能避免过分依赖于高度流动性的人力资源,才能保障服务实施的规范性、稳定性与可控性。IBM将来自于卓越执行中的项目经验与最佳实践文档化、系统化
我们公司要上一个ERP项目,我是项目经理。听有经验的人说,在项目实施过程中要每天写工作总结。我不知道该怎么写才好。总结都包括什么内容?需要公布出来,需要提交給老板看吗?    —陕西省榆林市 李大标    Q博士:    ERP实施是一个复杂的系统工程,项目管理的好坏对实施的成败至关重要。而要做好项目管理,首先要做好项目工作总结。  一般而言,项目工作总结的内容涉及项目实施的整个过程,总结的内容要
从全球范围看,SNS(社交网络)是迄今为止最符合Web 2.0精神的互联网应用。  四年前,并不是所有人都认为一个叫做脸谱(Facebook)的社区网站能够成功,至少全球首富盖茨就不这么认为——2004年吸引盖茨注意力的是MSN,当时他正信心百倍地想把MSN推到中国市场。2004年,美国互联网门户AOL忙于强化自己的互联网广告能力,时任AOL公司CEO的米勒用4.35亿美元的价格收购了互联网广告商