面向分布式集群的地理计算关键技术研究

来源 :国防科学技术大学 | 被引量 : 0次 | 上传用户:zhang1xiao123321
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如何进行高性能的地理计算是摆在地理信息系统领域的一道难题。用户使用地理信息系统相关的场景越来越多,对地理计算的响应时间要求却越来越短,传统的地理信息系统已经难以满足用户的需求。因此研究者们通过使用集群计算技术、内存计算技术等,不断更新着地理信息系统的内核。我们需要一个高性能的计算平台和任务调度平台,对地理信息系统的算法进行快速的调度。本文结合高性能计算平台Spark,从地理计算的算法调度框架的设计实现、基于Spark集群的时空数据聚集算法的提出、算法调度策略的选择以及Spark同MPI的混合使用等四个方面展开了研究。1.研究了地理计算调度框架结构。论文研究和讨论了调度框架的整体架构和组成,以及每个部分的功能,对其中的计算和调度模型进行了形式化的表述。2.提出了面向Spark集群的时空数据聚集算法。我们以常用的时空数据聚集算法为基础,根据Spark集群的中的弹性分布式数据集技术,提出了基于时空数据聚集算法进行改进的算法。3.针对地理计算的特性,研究了地理计算算法调度的调度策略。我们在先进先出调度策略,公平共享调度策略的基础上,根据地理计算的特殊性,提出了基于比例公平性的公平共享调度策略。通过实验对不同调度策略下地理计算的性能和适用场景进行了初步的分析探讨。并且根据任务调度过程中调度算法的表现,提出了其优化方法。4.针对以MPI为平台的地理信息系统,将新的以Spark为核心的调度框架同系统内以MPI为核心的调度框架混合运行,设计并实现了两者在同一个地理信息系统集群内混合运行的方法。
其他文献
  目的:探讨电针治疗帕金森病(PD)的作用机制.方法:50只雄性SD大鼠随机分为正常组、假手术组每组10只,模型组、电针组每组15只.PD大鼠旋转模型制备采用6-OHDA单侧纹状体立体
会议
  目的:研究灸法适宜温热刺激对人脐静脉血管内皮细胞(HUVECs)延缓衰老物质表达的影响,为研究灸法适宜温热刺激后启动"延缓衰老"效应提供了实验和理论依据.方法:原代HUVECs分
会议
  目的:根据脐静脉内皮细胞在接受热刺激以后,细胞内保护性蛋白HSP70和HSP90表达发生的变化,探讨灸络治疗可以在细胞层面自发形成保护和调节的作用.方法:利用人脐静脉内皮细
会议
本文围绕自动全站仪在港区堆场吊车轨道基础监测工程中的应用这一主题,首先对工程应用中涉及到的监测仪器、监测软件进行研究。其中包括自动全站仪及其三种软件开发平台、不
在全球变化的背景下,采区地表遥感生物量指标(NDVI或NPP)的增加,不能表明煤矿开采对地表生态没有影响;人工干预下的采区地表遥感生物量指标阶段性的增长,不能表明矿区地表生态过程
  目的:观察电针心经原穴及其配穴对心肌缺血大鼠海马BDNF、TrkB蛋白及mRNA表达的影响,探讨针刺抗心肌缺血脑损伤的保护作用及部分机制,比较不同腧穴针刺配伍的协同作用,为
会议
在现有高产的基础上进一步提高单产,是小麦育种的主攻目标,也是小麦生产发展的必由之路。但随着产量水平的进一步提高及生产条件的不断改善,高产与倒伏的矛盾日益突出,成为制约小
  目的:探讨毫针基本力学刺激对SD大鼠穴区筋膜结缔组织细胞形态结构和细胞活性的影响,为腧穴接受毫针基本力学刺激的现代生物学机制提供理论基础与实验证据.方法:1、以SPF清
会议
微流控技术是在微米尺度下对生物、化学等样品进行精确操控的一门科学技术,液滴微流控技术作为微流控技术领域的一个重要分支,可以实现高度均一液滴、乳化、双乳化、气泡等发生
β-咔啉生物碱是从新疆药用植物骆驼蓬(Peganum harmala)中分离出来的一种活性成分。在中医草药配方中,用骆驼蓬种子来治疗肿瘤由来己久。近年来,天然来源和人工合成的β-咔啉生
学位