基于多源无人机低空遥感影像结合生成对抗神经网络的多光谱重构研究

来源 :浙江理工大学 | 被引量 : 0次 | 上传用户:ZWDragon
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
卷积神经网络算法为光谱图像重构任务带来了突破性进展。以往的光谱重构研究主要集中在利用光谱图像同源的R-G-B通道作为模型的输入来重构多光谱,然而利用异源RGB相机图像重构多光谱图像才具有更突出的应用前景。本研究拟解决:1,异源图像空间错位问题;2,传统二维卷积网络难以同时提取图像的空间特征和谱段特征进行重构的缺陷;3,传统重构方法所得图像细节丢失的问题。数据采集分别使用无人机采集高分辨率的RGB图像和Red Edge-M相机的多光谱图像。为了解决异源图像之间不匹配问题,首先对多光谱图像和RGB图像使用Sf M算法进行拼接,接着使用Forstner算子对多光谱图像和RGB图像进行配准对齐,确保光谱图像和RGB图像对应,最后将配准后的图像裁剪成数据集。整个流程用来解决异源图像空间错位问题。其次传统的二维卷积网络很难对图像的空间特征和谱段特征问题同时提取,因此提出了一种名为Res Up&Down的多光谱重构网络结构块。Res Up&Down块采用三维卷积结构和残差边来提取波段间的特征,同时该结构块还可以提取图像的空间特征。用Res Up&Down来取代Res Net残差块,可以快速堆叠网络,同时有效缓解网络加深带来的梯度消失问题。通过对比实验可以得出:基于Res Up&Down的生成对抗网络优于基于Res Net的生成对抗网络。最后针对重构光谱图像纹理边缘细节丢失问题进行改进,本文提出了一种基于双通道生成对抗网络重构方法可以有效解决重构多光谱图像纹理边缘细节丢失问题。通过AWAN网络,单通道生成对抗网络,双通道生成对抗网络以及2种损失函数(L1、MSE)的对比实验,结果表明:(1)引入对抗网络可以缓解MSE损失函数导致的图像模糊问题。在重构近红外和红边波段中,L1loss损失函数和对抗网络(L1-D)的结合可以获取到最佳的光谱图像;(2)均方根误差、平均相对绝对误差和结构相似度只能反映重构图像的整体误差,不能反映重构图像的细节,而不同波段的统计直方图可以反映生成波段的高频损失;(3)通过定义NDVI-Io U、NDRE-Io U和EVI-Io U共3个指标来验证生成的多光谱图像构建的植被指数效果,它们与植被指数图具有较好的一致性。(4)本文提出的双通道网络模型的重构多光谱图像能力优于AWAN模型。综上所述,本文首先解决了异源图像匹配问题,其次构建Res Up&Down块来进行光谱波段特征提取,最后引入对抗网络来增强生成图像的细节纹理,提出的方法能够有效的使用无人机的RGB相机图像重构多光谱图像。
其他文献
在LNG工业链中,低温潜液泵使用在LNG的接收、转运和外输的每个环节,为LNG的安全输送提供保障。诱导轮作为低温潜液泵的重要过流部件,具有增压、抗空化等性能。诱导轮叶片叶顶与管道间隙形成的高速泄漏涡会引起诱导轮叶顶泄漏涡空化和旋转失速等流动不稳定问题,同时,低温介质的强热力学效应会加剧流体域的流动复杂性。为解决上述问题,需要掌握低温介质的输送特性和诱导轮叶顶间隙流动特性,研究叶顶区域空化和叶顶泄漏
学位
随着相关软件和硬件的不断进步,无人机的成本逐渐降低,因此开始被各个行业广泛使用。目标跟踪在无人机的很多应用场景中发挥了关键的作用,如军事侦察、搜索救援、交通运输等,是无人机发展的一个重要方向。然而无人机的目标跟踪存在着很多难题。首先,目标自身的变化和外部环境的不确定性给跟踪带来了困难。另外,长期目标跟踪中,目标可能从视野中消失或者被完全遮挡导致目标丢失。最后,需要有合理的控制方法能够使无人机的跟踪
学位
随着现代社会的发展和科学技术的进步,人们的生活水平有了质的飞跃,进而对一些生活的必需品提出了更高的要求,首当其冲的就是人类日常接触最多的织物。从过去到现在,这些织物经历了从御寒避体,到丰富美观的变化,以及现如今有着更高的功能需求。由于温室效应作用,夏天气候变得越来越热,降低空调负荷可对建设环境友好型社会出一份力量,并且可以减少二氧化碳的排放。所以在炎热环境下,人们需要与皮肤接触的夏季用服装和织物具
学位
实现农村现代化,是中国走向现代化必须经历的一个重要阶段。贵州作为全国最后一个实现全面脱贫的省份,各级政府竭尽所能,因地制宜发展特色农业,振兴农村经济,扶持涉农产业。在此机遇下,贵州N公司由区政府牵头,联合国有企业共同设立,运用大数据及物联网技术,采用订单农业模式发展现代养殖。由于该公司面对的客户群是散布在农村各地的农民,受教育程度低、信息相对闭塞、科技水平不足,在农业订单中处于从属地位,对于合同条
学位
随着计算机技术和互联网的快速发展,网上购买商品逐渐成为居民主要的消费方式。消费者使用手机应用软件可以快速检索国内外款式纷繁的服装产品,商品越过了传统分包售卖流程直接送达用户手中。因此当下服装图像的应用是重要的研究课题,其中识别与分类更是实现服装产业链数字化的基础技术手段。学术界围绕以服装图像为基础进行自动分类识别开展了许多深入的研究。由于服装图像包含的细粒度分类多,不同部件设计复杂,同时又受到服装
学位
汽车消费市场的饱和加剧了各大汽车厂商对市场份额的争夺,处在供应链下游的汽车经销商之间也因此为生存而进行残酷的竞争。服务质量的提升能够有效的帮助经销商企业击败其他竞争对手而获得更多订单。然而,如何全面的对服务质量进行评价是服务质量提升的第一步,受制于汽车厂商的汽车经销商缺少行之有效的评价工具。因此,构建一套综合的汽车销售服务质量评价模型具有重要的意义。通过现有文献梳理,发现汽车销售服务质量评价是服务
学位
随着电动汽车和便携式电子产品的高速发展,储能设备的大范围应用拓展,社会对储能装置的需求急剧增长,对它的性能提出了更高的要求,如更高的能量密度和功率密度。目前,锂离子电池(LIBs)以较大的性能优势占据着储能领域的主导地位。至今为止,商用锂离子电池的负极材料仍以石墨类碳材料为主,因其理论容量较低,无法满足未来更高能量密度的发展要求,因此,亟需开发能够替代石墨的新型负极材料。金属硫化物(Zn S,Sb
学位
乡村园地利用率低、地域性体现不足,以及园地生产性景观感知缺失等问题一直以来受到各界重视,却并未从根源上得到解决。当前,社会对人类感知日益重视。在景感营造视角下,可平衡不同利益相关者对园地生产性景观的感知,可使设计更理性化和精准化。在明晰园地生产性景观和景感营造等相关概念后,对其产生、发展和研究现状进行梳理述评。通过辨析发现园地生产性景观和景感营造具有紧密关系。同时运用问卷进行数据获取,综合不同利益
学位
随着智能制造推动传统制造业的不断升级,为响应市场需求,传统车间调度已逐渐转变为柔性作业车间调度,需要合理的生产调度安排为产品按时交付提供了重要的保障。柔性作业车间调度面临着复杂度更高、约束条件更多的情况,为保证调度结果的最优性,符合实际生产过程的建模尤为重要。由于在柔性作业车间生产过程中受到等待、缺料、停机等不确定因素的影响,订单计划完工期与实际完工期相差较大,进而影响生产进度并延误订单交付,因此
学位
假冒伪劣是一个日益严重的全球性问题,开发新型防伪技术是制止假冒伪劣的有效途径。常见的光学防伪技术如水印、烫印、全息图等,以人眼对颜色的辨别为依据,简便可靠,但其在应用过程中由于图像与颜色固定可见,易被破解和仿制。基于发光变色材料的光学防伪技术因具有仿制难度高、隐蔽性强的优点,成为新型光学防伪技术的研究热点。其中,响应型光子晶体结构色材料由于显著的虹彩效应及易于实现刺激响应变色,在防伪应用中具有明显
学位