基于GeoTrellis的栅格大数据分布式计算研究

来源 :西南交通大学 | 被引量 : 0次 | 上传用户:sevenzzzz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着地理空间信息领域中栅格数据获取技术的发展,获取到的栅格数据呈爆炸式的增长,而与强大的数据获取能力形成鲜明对比是数据处理能力的低下,这极大的限制了人们从栅格大数据中获取信息和知识,如何高效处理栅格大数据成为地理空间信息领域中亟待解决的问题,分布式技术为解决这个问题提供了思路。本文提出一个GeoTrellis地理计算引擎与Hadoop、Spark结合的分布式计算思路来解决栅格大数据的处理,GeoTrellis与Hadoop和Spark技术融合可弥补分布式技术在栅格大数据处理中的劣势,保证栅格大数据分布式存储与计算的有效性和高效性。文中设计了基于GeoTrellis的栅格大数据处理四层分布式架构,并基于该四层分布式架构设计和实现了栅格大数据分布式计算与存储系统。同时本文基于GeoTrellis地理计算引擎设计和实现了一个B/S架构的栅格大数据处理的Web测试系统,该测试系统可对10米分辨率的全球地表覆盖分类图进行分布式计算,系统具有栅格数据入库、构建金字塔、栅格渲染、地表覆盖分类统计等服务端功能,浏览器端具有栅格数据渲染与用户交互的功能。文章最后对分布式系统的计算性能进行了相关测试,测试中以不同的栅格计算应用探讨分布式集群的大小、栅格数据量的大小以及分布式集群中硬件资源对系统性能的影响,讨论分布式系统的扩展性、稳定性等问题,并给基于GeoTrellis地理计算引擎搭建栅格大数据分布式系统提出相关建议。
其他文献
在植物新品种保护制度不断发展的当下,农民权益日益受到冲击。农民权利在植物新品种保护制度中的地位至关重要,但现阶段国内外立法中对其主体认定标准和具体权限规定较为模糊
本文从矿业权转让与矿业公司股权转让的概念和法律属性入手,对两者之间的联系与区别进行了深入研究,最后结合实践提出矿业公司股权转让过程中存在的问题,并运用法学理论提出
膨胀土是一种以蒙脱石、伊利石、高岭石为主的粘土矿物,它具有强烈的亲水性质、超固结性、裂隙性,在遇水时容易导致膨胀而失水时造成收缩的反复变形性表现出与正常粘性土的工程性质区别,给在膨胀土地区中建设的公路、铁路、桥梁、隧道施工带来严重的影响,这种作用还伴随着反复性与长期潜在的危害性。尖山营大桥位于贵州省贵定县昌明镇,新建贵阳至广州高速铁路从此通过。有现场的监测数据显示,该大桥的桥墩出现了雨季异常抬升,
崩塌落石是我国西部山区尤为常见的地质灾害类型及动力地貌现象之一,一般发生突然且破坏力强。九寨沟景区熊猫海上游右岸边坡由于受到2017年8·8九寨沟地震影响,表层松动岩土体和节理裂隙发育岩体发生大面积崩落;同时,强烈的震动使得坡体的完整性遭到严重破坏,岩体更加破碎。如不及时进行治理,将严重影响九寨沟景区的灾后恢复重建工作,并威胁通行游客的生命财产安全。本文通过详细的野外调查,全面查明了危岩发育部位、
研究区位于西藏东部昌都地区贡觉县阿旺乡境内,地处滇藏地热带,区内构造发育、水热活动强烈,具有较好的地热地质条件。但受控于恶劣的自然环境及不便利的交通条件,对该区地热研究鲜有报道,为了满足当地对地热资源的需求,需加大力度对该区地下热水的成因模式进行研究,完善地下热水成因模式概念模型,为今后的地热资源开发或工程建设提供科学建议。本文以阿旺乡境内出露的地下热水为研究对象,在结合研究区已有资料的基础上,对
基于科技和先进设备的快速发展,中国船舶行业也得到飞速提升,凭借船舶界精英几十年的不懈努力与国家自身实力的强大,我国船舶工业已经步入世界船舶制造的先进行列。但是,就整体来看,我国船舶建造过程与日韩相比,生产模式相对落后,在造船核心技术和生产管控水平方面,仍然存在着一定的差距,精益化造船模式的推广尚未取得显著的效果。与此同时,船舶行业受全球经济危机的冲击,陷入了持续低迷时期,带给船厂巨大的压力与挑战。
在我国经济新常态下,科技型中小微企业在产业升级和结构调整任务中起到了重要的支撑作用。但是,因科技型中小微企业本身规模小,资金不充足,企业发展过于依靠知识产权变现能力的固有特点,导致科技型中小微企业未来发展不确定,风险大,进而导致其难以获得融资。目前,知识产权质押融资的标的主要以专利权为主,建设专利权融资风险分担制度,使传统的专利权质押融资和新型的专利权网络质押融资得到广泛运用,能够为解决科技型中小
城市精细三维模型是城市智能化管理的基础框架数据之一,其重要性越来越凸显。而翔实的立面纹理信息是重建城市环境中大规模Lo D-3的基础,然而,现有方法重建所得的建筑模型立面纹理在细节方面存在明显不足,特别是密集建筑群的立面缺乏足够翔实的纹理信息,难以满足城市建筑模型高质量的真实感可视化应用需求。街景影像由于其丰富的纹理信息可作为详细的立面纹理的最佳选择。但由于其系统集成的复杂性以及街景影像的变形和投
传统LLC谐振变换器的谐振腔快速动态特性导致其动态性能优化控制比PWM变换器要更难实现。对于LLC谐振变换器来说,其谐振腔的自然频率和变换器的开关频率非常相近,传统的状态空间平均法会消除开关频率的信息,故而不能用于其动态特性研究。为了得到更好的动态特性并减小谐振腔的电压电流应力,本文采用状态平面轨迹分析的方法对启动和负载突变工况进行了分析和优化,并完成了以下工作:在分析LLC谐振变换器最优状态轨迹
自2006年CHR系列动车组研发开始中国的高速铁路快速发展,建设高速铁路不可避免会遇到建设桥梁和隧道这一系列的工程,尤其是丘陵和山区较多的西南地区。而隧道的建设过程中经常会受到多种地质问题的影响,在隧道施工前准确地对可能遇到的不良地质体进行预测预报关系着整个工程的进展以及施工人员的人身安全,因此进行隧道地质超前预报是十分必要的。论文建立不同的隧道溶洞模型,采用多道地震反射波法研究二维波场快照、地震