基于深度学习的高光谱图像融合方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:cuthberthirsch
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高光谱图像具有光谱分辨率高、图谱合一的特性,已经在民用、军事等诸多领域得到了广泛应用。随着需求的不断增长,大量的遥感应用要求图像同时具备高光谱分辨率和高空间分辨率。然而在实际中,高光谱图像往往呈现出较低的空间分辨率,这限制了高光谱图像的精确解译和应用效果。全色传感器可以提供高空间分辨率的全色影像。因此,通过研究高效可靠的高光谱图像融合方法,将高光谱图像与全色图像进行融合以实现高光谱图像空间分辨率的有效提高,显得尤为迫切和重要。本文围绕如何利用全色图像提升高光谱图像空间分辨率并保持其光谱信息这一核心问题展开工作,深入研究基于深度学习的高光谱图像融合方法,充分挖掘并综合全色与高光谱图像的优势,突破传统线性模型的性能限制,克服现有融合方法面临的光谱保真度差、空间信息丢失、模型复杂度高、网络判别力受限、细节注入不准确等难题,探索并实现高精度、高效率、高智能的高光谱与全色图像融合方法。本文的研究工作概括如下:(1)基于引导滤波和深度残差网络的高光谱图像融合方法研究相较于全色和多光谱图像,高光谱图像通常具有更低的空间分辨率和更宽的波谱范围,高光谱与全色图像融合更易出现空间模糊和光谱失真问题。针对这一问题,本文提出了一种基于引导滤波和深度残差网络的高光谱图像融合方法。该方法首先将边缘细节增强后的全色图像用作引导图像,对上采样的高光谱图像执行引导滤波以生成光谱特性得到保持的初始化融合图像,然后设计用于改进融合精度的深度残差网络架构,在初始化融合结果的基础上进一步提高融合图像质量。基于地面和机载高光谱数据集的实验结果表明,本文提出的方法有效增强了边缘细节,显著提升了融合精度。(2)基于深度残差空间注意力网络的高光谱图像融合方法研究针对现有方法未充分考虑高光谱图像空间结构信息和图像各区域特征重要性不同,导致融合精度低的问题,本文提出了一种基于深度残差空间注意力网络的高光谱图像融合方法,不仅同时考虑全色和高光谱图像的空间信息,而且能够自适应地学习空间位置中对于增强融合图像细节信息更有用的特征。该方法首先基于结构张量和引导滤波器分别提取全色与高光谱图像的空间信息。然后,构建深度残差空间注意力网络学习两者总的完备空间信息与残差图像之间的映射关系,充分提取并利用对于融合更加有用的空间注意力特征。基于机载和星载高光谱数据集的实验结果表明,相较于现有算法,本文提出的方法可以在空间信息增强和光谱特性保持方面均取得更优越的效果。(3)基于深度先验和双注意力残差网络的高光谱图像融合方法研究为了克服高光谱图像上采样过程无法有效地恢复细节信息和网络判别能力有限的问题,本文提出了一种基于深度先验和双注意力残差网络的高光谱图像融合方法。该方法首先利用深度高光谱先验进行上采样,在无需大量数据训练的情况下实现高光谱图像空间分辨率的有效提升且更好地保持光谱信息。然后,将上采样结果与全色图像在光谱维拼接后输入双注意力残差网络,通过构建的通道和空间双注意力残差块自适应地突出光谱通道和空间位置中对于提升融合性能更关键的特征,同时抑制非重要的特征。基于模拟和真实高光谱数据集的实验结果表明,本文提出的方法进一步提升了融合图像质量,而且具有较强的泛化能力。(4)基于自适应特征调制网络的高光谱图像融合方法研究为了进一步解决全色图像细节利用不充分、注入不准确,且难以平衡光谱和空间质量的问题,本文提出了一种基于自适应特征调制网络的高光谱图像融合方法,该方法总体架构遵循细节注入模型,具有清晰的可解释性。首先,通过八度卷积单元直接有效地从全色图像高频特征中提取全面的空间细节信息。同时,设计具有不同尺寸卷积核的空间和光谱可分离三维卷积单元高效地获取高光谱图像的多尺度空谱特征。随后,提出基于自适应特征调制的细节注入方案,将全色图像空间细节作为先验并对高光谱图像特征进行仿射变换,实现在有效增强高光谱图像空间信息的同时自适应调整注入细节以保证融合图像的光谱保真度。基于模拟和真实高光谱数据集的实验结果表明,本文提出的方法在客观定量评估和主观视觉评价方面均得到了进一步提高。
其他文献
本文主要采用高频算法对覆盖等离子体目标的电磁散射特性进行研究,其中高频算法包括物理光学法、弹跳射线法以及射线追踪算法,覆盖等离子体目标包括覆盖均匀等离子体目标,覆盖非均匀等离子体目标以及覆盖等离子体鞘套目标。物理光学法对于电大尺寸目标的电磁散射问题研究十分有效,其物理概念清晰、易于编程,并且有计算机资源消耗少,计算速度快的优点,但对腔体目标及表面耦合作用强烈的目标无法得到其准确的雷达散射截面结果。
学位
汽油中苯胺类物质的精准分析对于加强油品质量监管、环境保护等具有重要意义。红外光谱技术以其简便、快捷等优势,被认为是汽油添加剂检测的有效工具。然而,汽油成分的复杂性及环境因素干扰导致红外光谱技术检测过程中产生大量复杂光谱,如何消除无关光谱信息以实现汽油添加剂的准确定量分析是目前面临的难题之一。本论文基于汽油添加剂检测的现实需求出发,以苯胺类物质为研究对象,开展了红外光谱技术结合化学计量学的汽油中苯胺
学位
<正>机械波的多解问题是高中物理的一个难点,也是历来高考中的热点.学生在求解机械波问题时,往往由于对波动的实质理解不深刻、对题目中隐含条件挖掘不透彻、对已知条件使用不全面等,常常会出现解答不完整而造成漏解.本文限于横波沿一条直线传播的情形,就常见的机械波多解问题通过剖析其成因进行归类例析,力求帮助大家掌握解决此类问题的方法.一、造成波动问题多解的原因有传播方向、波长大小、波形周期、质点振动方向、传
期刊
视觉目标跟踪作为人工智能中计算机视觉研究方向的一个热点及难点,被广泛地应用在军事国防、交通运输、医疗诊断和民用安全等各个不同的领域。其目的是仅在标定目标初始状态情况下,预测后续视频图像中目标的位置和尺度信息。现实跟踪场景中存在的遮挡、快速运动、剧烈形变、旋转和背景杂乱等挑战因素会导致目标外观改变,并且由于训练样本匮乏,致使设计一种高精确率、强鲁棒性的视觉目标跟踪算法仍然是一个极具挑战的开放性课题。
学位
本文围绕海洋表层系统辐射传输特性的并行蒙特卡洛模拟算法及海洋表层系统光学特性进行研究。针对实际应用中遇到的问题开展了两方面的研究,即风驱粗糙海面光散射特性和海洋表层多组分水体(包含海水、海洋粒子、溶解有机物、气泡以及其它粒子等)中光的辐射传输特性。论文重点讨论了风驱粗糙海面光散射特性的信息传递接口(MPI)并行蒙特卡洛模拟算法,含气泡层多组分海水中光子传输的统一设备构架(CUDA)并行蒙特卡洛模拟
学位
海气边界层是海洋及其上方大气边界层的统称,是海洋和大气物质、动量、能量交换的桥梁,昼夜变化剧烈,形态变化复杂,是对流层大气遥感中的难点。海-气边界层的遥感在天气预报、气象学、海洋经济保障以及海洋学等领域具有重要意义。微波辐射计是一种有效遥感海面参数与大气边界层参数的手段,其基于测得亮温与海面、大气参数的映射关系,由测量亮温反演得到海面参数与海上大气参数。本文深入开展了海-气边界层微波辐射特性、微波
学位
随着高功率脉冲源、敏感电子元器件、宽带雷达观测技术的快速发展,有关粗糙面与上方目标近场耦合和远场散射的研究引起了国内诸多学者们普遍关注。在电磁问题的计算方法中,时域有限差分(Finite Difference Time Domain,FDTD)方法由于是对Maxwell微分方程直接求解的时域方法,并具有灵活处理复杂模型和介质的优势,因此,被大量地运用于瞬态辐射、耦合、散射的研究中。但利用传统FDT
学位
随着科技的发展,电化学生物传感器已成为一种可靠的传感设备,是一种可以通过特定的生化反应,利用特定的基团、分离的酶、抗原、核酸分子链来检测化学生物分子的装置,可以将浓度、活性等待测信号转化为电信号(电流、电压、电容、电导等)的设备。这种传感器拥有分析时间短,操作简单,成本低,样品体积小等特点,拥有可重复利用和高灵敏度等优秀的表现,面对复杂的样品仅需要的前期处理简单。GaN作为第三代半导体材料,在电力
学位
追踪候鸟的迁徙活动是全面认识其生活史年周期的重要途径。中杓鹬(Numeniusphaeopus)在全球广泛分布,但在东亚-澳大利西亚候鸟迁飞区的迁徙活动一直缺乏追踪研究。2018年2月,在澳大利亚西北部的布鲁姆为捕捉到的中杓鹬成鸟佩戴平台发射终端或全球定位系统-全球移动通讯系统追踪器,以确定其迁徙日程、迁徙路线以及迁徙停歇地和繁殖地的地理位置。我们从成功追踪的7只个体获取了6 378条精度高于1
期刊
学位