基于分布式存储的海量遥感影像分类方法研究

来源 :东北林业大学 | 被引量 : 1次 | 上传用户:hblhzl_18
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着对地观测技术的不断发展,遥感影像的分类在军事、农业等领域发挥着重要的作用。传统的遥感影像分类方法需要人工设计特征和参数,使得模型的泛化性差且分类精度低。深度学习作为一种新兴的技术,在图像分类领域取得了突破性进展,它能够自动的学习图像的深层特征,具有较高的识别准确率。由于深度学习模型参数较多,一般采用GPU服务器对其进行训练。但是遥感影像数据量较大,单GPU服务器无法高效的管理海量遥感影像。因此,本文提出了一种基于分布式存储的海量遥感影像分类方法,该方法将分布式文件系统作为底层的存储架构,在上层采用GPU服务器训练改进后的遥感影像分类模型。论文的主要研究内容如下所示:(1)为解决单GPU服务器无法高效地管理海量遥感影像的问题,本文提出了一种基于HBase的海量遥感影像并行处理方法。其利用HDFS分布式文件系统和分布式数据库HBase构造了面向遥感影像应用的并行处理架构,对大规模遥感影像进行管理。本文采用希尔伯特曲线和网格索引相结合的索引方式,保证遥感数据在HBase的物理存储结构上具有较高的空间临近性。同时在影像金字塔的构建和数据存储的过程中,本文提出了一种基于MapReduce的并行处理方法,有效的减少了数据的存储与读取时间。实验结果表明,基于HBase的并行处理遥感影像的方法,可以快速的处理大规模遥感影像。与Oracle和MongoDB存储方法相比,该方法具有较高的扩展性和较短的处理时间,能够为大规模遥感影像的分类提供良好的数据管理服务。(2)为了减少遥感影像分类模型的训练时间和提高分类精度,本文提出了一种基于迁移学习改进的U-Net网络模型。该方法首先基于分布式存储结构设计了一种并行采样算法MRSW,其充分利用了遥感影像金字塔数据,缩短了训练数据的构造时间。然后采用VGG16模型的卷积参数用于初始化U-Net模型,加速了模型的收敛速度;为了避免模型产生过拟合,本文对U-Net模型下采样前和上采样通道合并后进行Batch Normalization操作;由于遥感影像中类别分布不均衡,导致模型的分类精度较低,本文将用focal loss扩展到多分类作为损失函数,增加错分样本的损失权重提高了模型的分类精度。实验结果证明,本文提出的基于迁移学习改进的U-Net模型在训练过程中更加稳定,在减少模型训练时间的同时具有较高的泛化能力。其在测试数据集上可达到94.12%的准确率,较原始U-Net模型提高了 5.88%。
其他文献
防爆发动机剧烈的振动对车辆使用寿命影响较大,针对上述问题,以WC5E型防爆胶轮车发动机为研究对象,建立其六自由度力学模型,研究发动机各阶振动频率分布及振动耦合情况,利用M
多媒体工具被广泛运用于教学活动中并演变成了一种重要的教学手段。CAI课件于小学数学教学中的运用就是其中非常具有代表性的一例。本文主要介绍了CAI课件教学的一般性特点及
为进行液压挖掘机工作装置的瞬态动态特性研究,对该结构进行了动应变测试。根据箱形断面在各种外力作用下的应力分布特点,在动臂、斗杆、动臂液压缸、斗杆液压缸等处布置了38
笔者在分析2000~2011年中部地区产业结构和就业结构相关数据的基础上,利用产业结构偏离度,对中部地区产业结构与就业结构进行了测度和比较分析,并结合运用相对国民收入指标,以
3月8日,习近平总书记在参加山东代表团审议时指出,“海洋是高质量发展战略要地。要加快建设世界一流的海洋港口、完善的现代海洋产业体系、绿色可持续的海洋生态环境,为海洋强国
报纸
长江流域是我国经济发展的主要区域,流域地理位置优越、人口稠密,各种自然资源丰富,是我国水资源配置的战略水源地、实施能源战略的主要基地、珍稀水生生物的天然宝库、连接
合理设计并应用组织对照是免疫组化质量控制的关键,可以有效保证实验过程中所用试剂的效用性、实验结果的真实性和病理诊断的准确性。不管是免疫组化室内质控还是室间质控,只
大多数土建结构由混凝土建造.混凝土结构的耐久性是当前困扰土建基础设施工程的世界性问题.混凝土结构受自然气候、人为、使用标准等因素影响,导致使用寿命大幅缩短.为了保证
<正> 刘志丹同志是陕西保安县(今志丹县)人,他从青年时期起就投身于革命。一九二五年加入中国共产党,同年秋天,奉党的命令,入黄埔军官学校。大革命时代,刘志丹同志曾任国民革
凡不作种用的羔羊及淘汰的公母羊,都可进行育肥,由于淘汰羊骨骼发育已经成熟,但肌肉发育尚不丰满,称其为架子羊。架子羊育肥具有增重速度快、饲料转化率高等优点。育肥前要进行去