基于分布式内存的空间数据分析技术研究

来源 :国防科学技术大学 | 被引量 : 0次 | 上传用户:clarinet1900
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
空间数据获取技术的飞速发展使得空间数据规模以前所未有的速度累积,传统空间数据的存储、组织、处理、分析等解决方案已不能适应当前应用需求。在地理信息领域引入计算机技术领域的最新发展成果已成为大势所趋,随着高性能计算的发展,分布式并行计算和内存计算技术为大规模空间数据的分析处理提供了新的机遇。但针对分布式结构特点设计空间数据模型、空间索引结构、查询执行策略和任务调度算法,以充分利用分布式集群环境的计算和存储资源,尤其是充分利用大量分布于各个节点上的内存资源,提高空间数据处理与分析的效率,仍有许多理论和方法需要研究。本文首先综合当前分布式计算架构的特点,设计实现了Key-Value型空间数据模型,具有较好的内存适应性和索引扩展性。并提出一种自适应Geohash编码方法并以此为基础建立了支持多种空间数据类型的分布式空间编码索引。接下来在节点间建立了自适应空间网格索引,实现分布式空间混合索引,并成功应用于栅格数据可视化分析中的瓦片金字塔构建。然后,基于分布式计算平台Spark实现了空间分析中的缓冲区分析和空间叠置分析算法,在算法实现过程中充分利用网格结构和RDD内存数据模型提出了多种执行策略和算法调度方面的优化方法,大幅度提高了空间分析算法执行效率。接下来根据住房选址原则和众多影响因素抽象出住房选址的数学描述,设计实现了住房选址模型和求解方法,在长沙地区和北京地区的住房选址应用中验证了模型的有效性和涉及到的空间分析算法的高效性。最后,将基于分布式内存的空间分析算法和住房选址计算模型集成于高性能地理计算平台HiGIS中,提供了用户调用接口,实现了空间分析结果的可视化。
其他文献
大叶女贞为木樨科女贞属常绿乔木,可用作行道树、庭荫树等,也可修剪成绿篱,近年市场需求量较大。大叶女贞可用播种和扦插两种方法育苗,但播种育苗较为普遍。笔者现将其播种繁殖方
学习英语的目的就是将其作为社会交际的工具,而交际语言教学法就注重提升学习者的口语表达能力。本文对交际语言教学法进行概述,分析了我国将这种教学方法应用在英语教学中遇
受国际粮价持续上涨的影响,粮食安全问题成为各国关注的焦点。在全球一体化背景下,根据我国的粮食供求现状分析,影响我国粮食发展的因素包括资源约束、农民种粮积极性、粮食
上都扈从诗是元代边塞诗的主要形式,通过对上都扈从诗中的生产民俗、饮食民俗、服饰民俗、居住民俗、节日民俗文化进行掘微与阐释,发现元代的上都地区民俗,虽然已开始向汉民
提出了一种Shearlet变换域嵌入强度因子能随图像内容自适应的水印算法。算法首先利用Shearlet变换对图像内容稀疏表示选择性,找出符合人眼视觉特性要求的水印嵌入位置,然后依
介绍了数字岩心技术的发展状况,指出了建立数字岩心的既有方法存在的不足,包括过程法无法对复杂的沉积体系进行模拟和随机法建立的数字岩心不具有大范围内的传导性。探讨了数
本文以雕塑与时间的关系为主要内容展开讨论。以各种设想来构思雕塑的时间性和时间的雕塑性。其中运用各学科的知识及艺术事件去探索雕塑与时间的关系,例如从历史、宗教、物
目的:向大脑中动脉缺血大鼠植入神经干细胞,探讨电刺激小脑顶核与神经干细胞共移植体对其向神经元分化的影响。方法:实验于2005-08/2006-11在佳木斯大学神经科学研究所完成。①
钟嵘《诗品》以"滋味"论诗,使中国诗学有了新的审美范畴。审视钟嵘《诗品》品评的五言诗及其反映的生活,会发现"滋味"不是抽象概念,而是充满审美张力的审美范型。"怨"与"清",
近年来,流苏这一传统装饰物在毛衫上广受推崇,各路设计师发挥"天马行空"的想象力,让流苏呈现出与众不同的装饰效果;运用毛衫的特点,别出心裁地开发出更多的流苏在毛衫上的表现