海量地震数据并行处理中作业调度优化的研究

被引量 : 0次 | 上传用户:fsch2000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
MPS是适宜海洋地震资料处理的PC集群并行处理系统,是解决海量地震数据复杂运算问题的系统处理与开发平台。它建立了并行作业调度系统,具有作业调度管理的基本功能,但是系统存在诸多不足,如:作业调度模块中的调度算法还存在缺陷,地震作业的处理效率不能令人满意等。为了解决上述的问题,本文通过研究地震数据作业调度系统的架构,分析地震作业的处理流程,对作业调度模块中的作业选取算法以及节点分配算法进行了优化,并且提出作业并行处理模型,对作业处理中的I/O调度进行优化,以提高作业的执行效率、更有效的利用系统资源。本文的主要研究内容如下:1.研究作业调度系统的架构和相关技术研究了作业调度系统的组成,分析了作业调度模块和作业处理流程中的不足,提出了对作业调度模块和作业处理模型进行改进的方案。另外,还介绍了地震数据作业集群中节点的主从模式、主从节点的功能等。2.研究作业调度算法及节点分配算法分析了当前作业调度算法的原理,针对该算法的不足,提出了改进的回填调度算法。该算法通过修改等待作业队列中小作业所需要的内核数,使内核数等于集群空闲资源的内核数,使没有回填机会的小作业得到回填机会。同时对作业中的节点分配算法进行了优化,通过减少作业外通信的比例提高作业的执行效率。3.研究地震数据处理系统(MPS)中的作业处理模型及I/O调度优化本文通过对地震数据处理系统(MPS)的作业处理流程进行分析,提出了地震数据作业并行处理模型。该模型实现了把作业中的输入模块、处理模块、输出模块三个模块分为三个进程并行执行,充分发挥处理器多核的优势,进而提高作业的执行效率。另外通过对当前地震数据作业抽道集方法的研究,分析了当前地震数据抽道集方法的缺陷,对地震数据作业的抽道集方法进行优化,在地震数据作业读取地震文件时尽量减少读取磁盘和定位磁盘的次数,从而提高读取地震数据的效率。最后对优化后的系统进行作业测试,计算出测试作业的平均响应时间、平均运行时间和资源利用率等指标,通过与优化前的指标进行比较,表明优化后的调度算法提高了集群资源的利用率,减少了作业运行时间。
其他文献
护士信息化排班能够帮助护理管理者节约排班时间,提高工作效率,增强排班公平性,具有较高的研究价值。本文通过对相关文献进行研究分析,就国外护士信息化排班的相关问题、类型
文章通过对南亚热带杉木人工林近自然化改造8a后的林分生长发育、生物量与物种多样性的实地监测调查,探究了改造后杉木人工林生长发育和林分结构的演变机制,表明了杉木人工林
介绍了一种基于PLC的智能灌溉施肥机,能实现不同营养液浓度、不同灌溉模式的自动控制,适合温室/大田的多品种、多灌区、不同生长阶段作物灌溉施肥所需营养液的精确调配。
持续审计是信息时代审计发展的必然趋势。与传统期间审计相比,持续审计具有不可抵挡的功效优势,不仅体现在给审计师和企业带来的功效上,同时持续审计还能够更好地满足使用者
农村公路线路分布范围广,里程长,如果采用热拌沥青混合料修建,主要有以下缺点,热拌沥青混合料的生产对拌和加工设备价格普遍偏高,特别是对年需求量不高的远郊区,无形中提高了
<正>每一企业自身所拥有的资源是有限的,运营能力是指企业通过资源合理配置与经营进行社会财富创造的能力。企业强化运营能力的实质就是在某一固定期限内通过提高资产的快速
针对当今国际应对气候变化的战略背景,结合我国“十二五”建设绿色交通体系的要求,本研究对绿色公路的内涵及特点进行界定,分别从绿色公路“碳补偿”绿化带与“碳中性”服务区
高速公路建设项目规模大,投资多,周期长,其快速发展要求对其建设成本进行严格有效控制。本文对一条高速公路建设项目在前期工作、建设管理、竣工决算过程中一些容易造成资金
北极航线是目前学术界非常关注的热点问题,北极航线为俄罗斯与欧洲、与北美之间的联系增加了新的纽带。随着北极升温,冰山大量融化,北极地区将成为一个新的资源和能源产地,成
信任是维系人类错综复杂的社会关系的重要纽带,在人类的社会交往中起到“润滑剂”和“粘合剂”的作用。对幼儿信任特点的研究对于心理学、幼儿教育乃至哲学领域都有着重要的价