基于Hadoop的海量影像数据管理关键技术研究

被引量 : 0次 | 上传用户:a597525618
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着各种遥感仪器空间分辨率?频谱分辨率的不断提高,工作时间的延长,各种不同应用遥感影像的数据量急剧增长,积累了大量的影像数据?传统的GIS(Geographical Information System,地理信息系统)主要基于集中式的管理方式,单一节点的限制很容易成为海量影像数据管理的瓶颈,出现了影像数据积累多,可以利用的影像数据少?的难题,许多影像数据无法得到有效利用,不仅浪费获取的花费,而且占用大量的存储空间?因此,研究可以管理海量影像数据的信息系统是急需解决的技术难题?云?通常由成千上万的服务器集群组成,具有动态伸缩的特性,可以为人们提供无尽?的存储能力和计算能力?随着云计算的兴起和发展,为我们解决海量影像数据的存储和管理提供了新的思路和方法?Hadoop是由Apache基金会管理的一个开源项目?作为一个知名的开源云计算系统,它可以为人们提供一个分布式并行编程的框架,简化分布式程序的开发?论文基于Hadoop,对海量遥感影像数据影响金字塔的并行构建?海量遥感影像数据的存储两个方面对云计算应用于海量影像数据的管理技术进行了研究?论文的主要研究内容和创新点如下:首先,论文对传统的集中式的影像数据管理技术进行了分析,指出了传统影像数据管理系统在管理海量影像数据时存在的不足,同时介绍了基于Hadoop的开源云计算系统的特点及关键组成部分,提出来基于Hadoop的海量影像数据处理和存储的框架?其次,论文基于MapReduce并行编程模型的Hadoop云计算系统开源实现,研究了海量影像数据的影像金字塔并行构建技术?针对影像金字塔的特点,设计了一种基于Map和Reduce的并行和递归构建算法,使海量数据的处理分配到各子节点并行执行,大大加快了影像数据的处理速度?第三,论文基于Hadoop云计算系统的分布式列数据库HBase,对影像数据的分布式存储的索引机制进行了研究,提出了一种适用于海量影像数据分布式存储的索引——P2H,可以使得地理空间相邻的影像数据,物理上尽可能相邻或相近,提高海量数据的查询效率;同时对影像数据的模型进行了研究,提出来一种适合于多时相?多分辨率的海量影像数据的存储模型?可以对不同时段?不同空间分辨率的海量遥感影像进行存储和快速查询?最后,基于上述研究成果,设计了实验,验证了本文所提方法的有效性和实用性?
其他文献
波形潜流人工湿地包括水平流、上行流和下行流在内的混合流态,集合了潜流人工湿地和垂直流人工湿地的优点,优于传统潜流人工湿地。本文主要结合波形潜流人工湿地的特点,探讨
本文简要回顾了全球卫星通信从C/Ku波段到Ka波段,从话音、广播电视到互联网应用的轨迹;对目前Ka波段HTS卫星网络的架构、地面系统情况以及采用的新技术进行了概述;列出了目前
<正>1资料与方法我院从1992~1997年对856例60岁以上老年人的Holter监测:其中253例经临床及实验室检查均符合1998年全国冠心病诊断标准。其余603例分别为:高血压、糖尿病、慢性
会议
城市的形成和发展与交通系统的发展密切相关,新的交通工具和交通系统的发展是推动城市变化和发展的动力之一。国内外城市发展历程表明交通方式的改变必然引起城市空间格局的
采用BP(Back Propagation)神经网络,借助德国莱尔浩福二合公司(Reilhofer KG)的德尔塔分析仪(delta-ANALYSER),将对发动机进行等角度采样的振动信号进行阶次分析所得到的阶次谱作为神
大江健三郎的《摆脱危机者的调查书》在小说叙事结构、人物形象塑造、文体风格三个方面上呈现出鲜明的狂欢化色彩。在叙事结构上,小说的双重叙事结构体现了巴赫金狂欢诗学的
目的 体外研究三维打印技术在全口义齿基托蜡型制作方面的应用.初步评估其临床应用前景.方法 将无牙颌模型随机分为两组,每组5个样本,一组用三维打印技术制作基托蜡型(实验组),
碳微球是碳材料的一个分支,具有许多优良的特性,因此很多学者对其进行了研究,包括性质、合成方法、应用等。溶剂热法制备碳微球是近几年来兴起的一种制备碳微球的有效方法,因
移动无线网络建设的质量关乎着整个无线通信的好坏,是无线通信建设的重要环节,因此,本文对移动无线网络建设质量进行分析与研究,分析了移动无线建设的内容和影响因素,提出来
目的:探讨二甲双胍联合表皮生长因子受体(EGFR)信号通路阻断剂对子宫内膜癌细胞增殖的影响及相关的作用机制。方法:选取子宫内膜癌Ishikawa及HEC-1A细胞,CCK-8方法检测二甲双