高性能计算在高光谱遥感数据处理中的应用研究

被引量 : 26次 | 上传用户:gg106419
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高光谱遥感是遥感技术的前沿,其蕴含的丰富波谱数据使得地物的定量检测成为可能[1]。在“遥感找矿面临的新挑战”为主要议题的第302次香山科学会议上,一致认为高光谱遥感技术增强了遥感的对地观测能力和地物识别能力,极大的提高了遥感技术的定量化处理能力[2]。高光谱遥感技术使遥感从对地物的鉴别发展到可对地物的直接识别阶段,利用高光谱遥感数据进行矿产探测是遥感技术应用的主要方向之一,已经广泛地应用于资源勘查、灾害监控和环境监测等方面。随着我国“高分”专项的实施以及“资源一号”02C卫星的成功发射和在轨运行,高光谱数据源获取的瓶颈问题将逐步得到解决。高光谱遥感数据包括了空间、辐射和光谱三重信息[3],行业应用中的数据量已经达到TB级,已经达到海量数据级别。数据的海量特性严重制约了应用的拓展和实际工程应用效率的提高。如大小为30000*30000的卫星遥感图像,如果采用传统的串行方式进行校正,其运算量将达到数百亿次浮点乘加操作;大量数据操作和处理的复杂性决定了高光谱遥感图像数据处理具有很强的计算性,普通计算机和价格昂贵的专用硬件系统远远无法满足遥感数据处理日益增长的需求。此外,高光谱遥感图像的预处理、校正、分类、填图等应用算法十分复杂,这些因素都严重制约了实际行业应用中矿产勘查工作开展的效率。高性能计算是计算机发展的重要技术之一,也是解决海量数据处理效率低的有效方法,在很多大数据量计算领域已经得到了运用,但是对于海量高光谱遥感数据的高性能计算而言,由于高光谱遥感数据对应几百乃至上千波段不等的数据,波段之间的数据具有关联性,需要将光谱维数据和空间维数据综合使用[4],进行并行处理时,简单的追求计算速度在应用端反而会造成约束。此外,由于计算机内存限制,读取海量数据时的分块操作也必须考虑光谱维和空间维的统一。本文研究了海量高光谱遥感数据处理方式,并针对高光谱遥感图像特点提出适合CUDA(Compute UnifiedDevice Architecture)和MPI(Message Passing Interface)两种并行环境下并行处理的模型,形成适用于并行环境的高光谱遥感高性能计算优化策略。同时以高光谱遥感混合像元分解以及降维处理算法为例,进行算法的高性能并行化改写,分别构建了基于CUDA和MPI的并行开发架构,设计开发了高性能高光谱遥感混合像元分解处理算法及相应程序,集成了计算机软件及高光谱遥感处理的方法技术,是进一步开展高光谱遥感其他处理方法的高性能计算研究的基础,可以为社会经济可持续发展和矿产资源勘察工作提供技术支撑。最后,对基于MPI/CUDA混合并行模式下的数据处理方式进行了理论研究,建立了混合并行环境下的数据计算模型。主要研究工作如下:(1)研究了适用于并行环境下的海量高光谱遥感数据金字塔模型。(2)研究海量高光谱遥感数据的优化读写算法,突破了商业化软件对海量数据源提取方法源代码的保护。(3)研究并设计了基于GPU的高光谱遥感数据处理并行模式,并以混合像元分解处理方法的并行算法为例程序实现并测试,包括:无约束最小二乘法、和为1的部分约束最小二乘法、端元投影向量法。(4)研究并设计了基于MPI的高光谱遥感数据处理并行模式,以降维处理的并行算法为例进行了验证,包括主成份分析(PCA)以及最小噪声分离(MNF)算法。(5)对于CUDA+MPI混合并行环境下的算法设计和数据计算模型进行了理论研究,为深入研究高性能计算在高光谱遥感中的应用打下了坚实基础。
其他文献
在即将到来的3G时代,基于位置的服务(LBS)将会发展成为移动互联网上的一个业务亮点。GPS技术的无缝集成,网络条件质的飞跃,3G终端的普及,信息内容的丰富等各方面条件的改善会
随着城市交通压力的不断膨胀,近年来我国调整了城市交通发展战略,兴建了以地下城市轨道交通等大容量快速交通系统为主体的现代化综合交通系统。在国内地铁的建设中,虽然已有
目的:当今世界,随着经济的高速发展和工业化进程的加速,人类健康面临非传染性疾病的威胁正日益增加,糖尿病患病率和糖尿病患者数量急剧上升。肠促胰素是人体内一种肠源性激素,在
近年来,铝箔包装的使用越来越广,铝箔包装中的重金属含量直接关系到人们的健康。利用ICP-MS对铝箔包装中重金属含量进行分析,选取P1、P2、P3、P4四个质控样品,利用质谱法判定
本文关键阐述营养配餐的概念和推行部队营养配餐的意义。着重分析部队推行营养配餐所遇到营养配餐意识不强,对营养配餐理解不够深,营养配餐机制不够完善,部队炊管人员素质还
视学生为一种重要的课程资源,这是新课程改革的一大亮点,也是难点。学生在教育教学中起着独特的作用,扮演着教育对象、教育人力资源和课程开发的主体等角色。开发和利用学生
中阶梯光栅光谱仪以中阶梯光栅为主色散元件,配合低色散元件进行交叉色散,采用面阵探测器进行接收,在像面上形成二维光谱图像。由于利用了中阶梯光栅大衍射角、高衍射级次、全波
天然气是一种低碳、清洁和高效的能源,近年来国内需求量逐年增大,供需矛盾日渐突出。利用CO和H2合成天然气不但具有良好的市场前景而且可以减少碳排放、提高热量利用率,具有
天然裂缝是油气藏中普遍存在的一种构造现象,尤其在盆地构造活动强烈的区域。对于低渗砂岩油藏,断裂系统对油气的成藏以及后续的开发工作显得尤为重要。本文研究的鄂尔多斯盆地
棉花土传黄萎病是棉花连作障碍的主要病害之一,是一种典型的土传病害,其病原菌为大丽轮枝菌(Verticillium dahliae Kleb).传统的化学防控通常会带来环境问题而田间防控措施如