基于分布式深度学习的高光谱图像目标检测算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:qq619609199
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为对地观测的重要手段,高光谱遥感图像凭借其丰富的光谱信息和“图谱合一”的数据特性,受到了学者们的广泛关注,尤其是基于深度学习的高光谱目标检测技术,成为了当下的研究热点之一。但高光谱图像庞大的数据量和复杂的图像背景在一定程度上限制了基于深度学习的高光谱目标检测技术的发展与应用。其所面临的问题主要有:(1)高光谱遥感图像标注工序繁琐困难,难以为数据驱动的深度学习模型提供大规模有标注的训练样本,极大地限制了深度学习方法的应用。(2)高光谱图像数据的背景地物组成复杂多样、光谱混合和同物异谱效应导致目标与背景难以区分,增加了目标检测的难度。(3)高光谱图像数据量庞大,传统的单机训练耗时久且难以满足如此大的计算需求,增加了深度学习方法研究、调试和部署的难度。因此,针对高光谱图像的成像机理和数据特点,设计准确且高效的基于深度学习的高光谱目标检测算法具有重要理论意义。论文的主要研究内容和创新点如下:针对高光谱图像训练样本稀缺的问题,本文提出了一种基于背景高效学习的高光谱目标检测方法。该方法根据在高光谱图像目标检测任务中,目标像素一般为稀少像素这一数据特征,提出了将图像中大量的背景像素作为训练样本进行深度学习训练的策略,为高光谱图像目标检测引入深度学习方法提供了新思路。该方法首先通过粗检测提取背景像素作为训练样本,然后通过改进的自编码网络学习图像背景特征并利用原始高光谱图像生成完整图像的重构,最后利用重构图像与原始高光谱图像的光谱角距离图进行目标检测。在构建自编码网络过程中,该方法将目标光谱信息引入网络损失函数,以实现对疑似目标像素的约束,缓解了疑似目标像素对背景学习的干扰,使网络可以更准确地学习背景信息。充分的背景学习使网络能够更好地重建背景像素,从而突显目标像素并提高检测性能。实验结果表明与其它对比算法相比所提出算法的平均检测精度提高了约2%,且其虚警率可以达到0.18%,能够在保持高检测精度的同时降低虚警。针对高光谱图像庞大的数据量导致深度学习训练耗时久、调试困难的问题,论文首先在基于背景高效学习的高光谱目标检测方法中引入LAMB优化器进行训练,解决了流行的SGD、Adam等优化器在批量规模大于8K或学习率较大等情况下可能会导致模型性能的大幅下降问题。此外,LAMB优化器的引入可以在一定程度上缩减模型的训练时间,并且为后续大批量分布式训练提供了优化器基础。随后为了进一步提高深度学习的训练效率,克服传统的单GPU训练时间长且难以满足高光谱图像复杂计算需求的问题,论文提出了一种基于分布式深度学习的高光谱目标检测方法。该方法对论文提出的基于背景高效学习的高光谱目标检测方法的训练过程进行改进,利用Horovod框架实现了单机多卡和多机多卡的分布式训练,缩减了深度学习的训练时间。此外,针对多机多卡分布式训练中过多的梯度传播造成节点通信压力大进而影响分布式训练性能的问题,论文将梯度压缩算法引入到多机分布式训练过程,缓解了多机分布式训练的带宽压力,进一步提高了多机训练的性能。在分布式环境中进行实验表明,本文提出的方法实现了在单机多卡环境中训练时间随GPU数目的增加而近似线性减少,而且在多机多卡环境中梯度压缩也取得了明显的加速效果。
其他文献
仓储管理是物流运营过程中必不可少的一个重要环节,随着大数据与信息技术的发展,新兴仓储技术的形成与发展可以带动整个物流产业技术范式的变革。了解技术的发展趋势,及时、准确地捕捉新兴技术的发展主题可以辅助科研人员确定相关研究方向,促进企业或政府等组织依据技术发展的新兴趋势提前制定正确、有效的发展策略和相关政策。本论文以仓储领域为研究对象,系统地探究了新兴技术主题的识别框架和融合结构与内容属性的异质科研合
学位
溶解性有机质(DOM)广泛存在于土壤、水体等环境介质中,是地球上分布最广的有机物质之一。DOM具有复杂多样的结构,可与环境污染物发生相互做用,介导其在环境中的赋存、迁移和反应。由于含有具有光化学活性的基团,DOM可以在太阳光照下发生一系列光化学反应。其可通过光敏化反应产生多种自由基,这些自由基可以降解水环境中的有机污染物,或影响具有重要环境意义金属离子的形态和归趋。DOM光照生成的自由基还可以诱导
学位
跨境电子商务已经成为了促进经济增长的重要方式,2021年,我国跨境电子商务的进出口总额达到1.98万亿元,进出口跨境电子商务的发展促进了我国产业结构的提升优化,驱动了相关产业的创新发展,为我国外贸企业开拓新市场提供了重要渠道。消费者风险感知是影响消费者购买意愿的重要因素,在线评论中包含着大量的用户体验信息,是影响消费者风险感知和做出购买决策的重要依据。因此,基于在线文本评论识别跨境电子商务背景下消
学位
当光透过雨雪、烟尘、磨砂玻璃等复杂介质时会发生散射,导致相机上仅能接收到杂乱无序的散斑图案,无法依赖传统的光学成像方法辨别目标信息。近年来研究人员提出了一系列方法,以恢复出散斑图案中隐藏的目标信息,实现透过散射介质成像。散斑相关成像方法作为新兴技术中的一种,由于具备单帧、非侵入式成像、光路设计简单等优点受到研究人员的广泛关注。然而,该方法的成像范围受到散射介质中光学记忆效应的限制,超出光学记忆效应
学位
空气中粒子之间频繁的碰撞和摩擦都会致使粒子带电,对带电粒子的散射特性与逆散射研究将有助于遥感、成像及大气光学的发展。Mie理论能够精确地计算平面波入射的粒子散射特性,但只能得到总体散射之后的结果,使用Debye级数展开(DSE)方法则能对粒子的每个散射过程加以解释分析。具有独特光学特性的石墨烯涂层粒子通过Drude-Sommerfeld模型转化亦可将其认为是一种特殊的带电粒子。贝塞尔光束是一种沿着
学位
随着越来越多人为设计的复杂场景出现,对这些结构进行测量维护的需求便不断上升,而通过人工测量维护的成本较高。利用计算机和一些传感器设备,三维重建技术可以将这些场景做高精度建模,有助于对这些场景分析和维护。目前三维重建技术主要分为主动式三维重建和被动式三维重建,主动式三维重建依赖于传感器如深度相机,激光雷达等主动测量深度的设备获取场景的深度信息,使用时成本较高,深度相机的精度和分辨率目前都难以用于大场
学位
风格迁移是一种自动生成艺术图像的技术,可以将真实拍摄的照片转换成具有某种艺术风格特点的图像,并且保持大致的内容不变。在工业上的动画CG制作、动漫电影制作、趣味相机软件等领域,风格迁移技术凭借着自动化、高效率、高灵活度等特点已经有广泛的应用。但是风格迁移技术存在重大的限制,即每个算法模型只能对一种艺术风格进行迁移,这导致了模型的可复用率极低,在工业场景上的应用也受到不小的限制。而任意风格迁移方法的出
学位
红外成像系统因其具有适应性强、隐蔽性好等优点,并随着其快速的发展和功能的完善,被应用于很多领域。为了提高红外成像系统的性能,一般采用高于12bit的模数转换器,获取高动态范围图像,无法在传统低动态范围显示设备上正常显示,且红外图像有对比度低和信噪比低等问题,导致图像质量较差。红外高动态图像细节增强算法致力于解决上述问题,目前主流的研究方法是基于分层的思想,但是存在梯度反转和光晕等现象而影响图像质量
学位
红外辐射是频段位于可见光和太赫兹微波之间的一类电磁波,温度处于绝对零度以上的物体,都会产生具有一定强度的红外辐射。基于红外探测基本原理,红外成像能够完成全天时探测任务,因此红外探测在很多领域得到了广泛的研究与大规模的应用。由于红外光学镜头、焦平面阵列响应特性与制备工艺、模数信号处理电路等多方因素影响,得到的红外图像难以达到理想效果,存在非均匀性噪声大、信噪比低、边缘细节模糊等问题。随着基于大数据驱
学位
基因组变异与人类复杂疾病/性状具有密切联系,对其进行合理的分析对于疾病致病机理的研究具有重要意义。拷贝数变异(Copy number variation,CNV)是基因组变异的一种重要形式,在癌症基因组变异中占相当大的比重,其长度往往在几千碱基(KB)至几百万碱基(MB)之间甚至更长。众多研究表明,基因组CNV往往隐含了癌症驱动基因或抑制基因。在肿瘤样本中对CNV进行准确的检测,能够对癌症疾病的分
学位