基于注意力重构和空—谱依赖性关联的遥感图像超分辨率重建

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:hxzhou618
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
遥感图像在军事侦察、环境监测、地形测绘等多个领域有广泛的应用,因此获取到质量较高、边缘纹理清晰的高分辨率遥感图像有助于图像解译与应用等相关任务。然而,受限于成像系统自身的硬件条件,以及在处理过程中存在不可避免的图像降质因素,获取到的遥感图像存在分辨率低、缺少边缘纹理细节、噪声污染严重等问题。当下的超分辨率重建方法多应用在目标单一、景物尺寸大、自身具有丰富高频信息的光学自然场景上。这类方法不能很好地应用于遥感图像场景。因此如何获得空间分辨率更高、视觉感知更好的遥感图像具有重要课题意义。为此,本文针对现有遥感图像和高光谱图像超分辨率重建任务中存在的问题,开展了基于深度学习的单帧超分辨率重建算法探究,本文主要工作内容如下所示:1)针对光学遥感图像超分辨率重建过程中缺少目标空间先验信息,以及不同特征层信息利用不充分的问题,本文提出了一种基于连接注意力的双分辨率重建方法。该方法通过构建多尺度双分辨率学习结构直接补充目标分辨率下空间结构与细节学习,同时引入连接注意力机制,在减少学习过程中信息丢失的基础上对不同特征层信息充分利用,从而加强超分辨率性能。2)针对高光谱图像超分辨率重建过程中空-谱相关性未得到充分利用,以及存在光谱失真的问题,本文提出了一种基于空-谱依赖性建模和通道冗余调整的超分辨率重建方法。该方法提出了通道冗余调整机制,旨在减少特征提取过程中通道维度上冗余相似信息的出现,进而增强特征对空、谱信息的表达能力。在此基础上,通过空-谱依赖性建模首先完成局部空间高频信息的重建,然后引入反亚像素采样机制提取出目标空间结构先验信息,以指导局部信息的融合,从而实现由局部到全局的图像精细化超分辨率。3)针对高光谱遥感图像超分辨重建过程中空间维度上可利用信息匮乏的问题,本文提出了一种基于空-谱依赖性和低频信息补偿的超分辨率重建方法。该方法依据空-谱依赖关系,通过引入打乱注意力机制,构建了从光谱到空间的低频信息补偿机制,以补充超分辨率过程中所需的低频信息,从而为精细高频信息的重建提供保证。
其他文献
红外成像系统凭借其自身的优点被广泛应用于军事和民用领域,尤其自新冠疫情爆发以来,红外热成像系统更是被广泛地应用于对通行人员体温的实时检测等。然而,由于红外成像系统中焦平面阵列存在非均匀性,严重影响了系统成像质量和系统性能。引起红外焦平面阵列非均匀性的主要原因是由于制作工艺水平受限导致探测单元响应不一致。为了弥补因为工艺水平受限等原因导致的成像质量差的问题,学者研究了红外焦平面非均匀性校正算法,提升
学位
遥感技术的迅速发展极大的降低了高质量高分辨率的遥感图像的获取难度,这也解决了遥感图像地物分类任务的数据获取问题。如今,遥感图像地物分类领域面临着如下问题:一方面,遥感图像拍摄的场景通常比较复杂,基于传统图像处理的地物分类方法的特征提取能力有限,不能满足复杂场景的应用需求;另一方面,基于深度学习的遥感图像地物分类算法的训练数据需要进行像素级标注,其标注成本较高,使得大量的数据未被标注,导致这部分数据
学位
近些年,随着遥感和卫星技术的发展,多种类型的传感器获取遥感影像数据(多源遥感数据)的规模与日俱增,这给遥感影像的场景解译提出了严峻的挑战。本文针对的是跨源遥感图像检索任务,和一般的跨模态检索任务相比。一方面,高分辨率遥感影像包含的内容复杂,所以单场景包含的目标大小、类别变化多样。另一方面,由于不同传感器获取的遥感影像在分辨率、图像通道等方面的不同。例如,全色图像相较于多光谱图像缺少颜色信息,而多光
学位
光学合成孔径成像技术是实现超大孔径光学系统的一种重要且有效的途径,也是未来地基望远镜和天基光学遥感器的主要发展方向之一。它采用多个小孔径构成阵列合成大孔径系统的方式来实现高分辨成像。与传统大口径成像相比,光学合成孔径成像系统具有加工难度低,成本低,重量轻,体积小,组装设计灵活等优势。然而,合成孔径系统是子孔径的填充,频谱响应低,通常采用对其进行子孔径排布优化的方式提高分辨率,但此方法在面向深空探测
学位
目标检测是计算机视觉领域基础且重要的研究方向之一。当输入图像时,目标检测算法要给出图像中不同目标的类别和位置坐标。近些年来,研究人员在该领域进行了大量的研究工作,并取得了一些突破性的进展,但是目标检测算法仍然面临着诸多挑战,例如真实场景中不同目标的尺寸、长宽比、遮挡和模糊等情况都对算法的鲁棒性和准确性提出了更高要求,准确、高效地对目标进行定位需要目标检测算法具有更强的特征分辨能力和边框定位能力。本
学位
SiC复材构件具有多孔隙、非匀质的特点,通过CT扫描得到的切片图像特征复杂,疑似缺陷的孔隙数量较多,人眼难以鉴别。为了精准得到复材构件的内部结构,需要使用高分辨率CT扫描仪扫描,经济成本高。在实际工业场景中,缺陷样本数量少且较难获取,且正常样本与异常样本存在类别不均衡问题。现有监督学习方法未能很好的解决上述问题,而基于表征学习的生成式算法仅利用正常样本训练期望获得正常区域的表征模型,通过对比正常区
学位
异常事件检测在计算机视觉任务中是一个重要的研究方向,主要应用在智能监控、灾难预警等领域。对密集人群中发生的斗殴,枪击,恐慌等危险行为进行监控和预警是异常事件检测的重要应用之一。在线的异常事件检测任务目标是对摄像头实时捕获的视频流数据进行预处理和解译,检测是否存在异常事件。针对该任务存在场景复杂,异常事件发生频次低,受限制的设备端进行边缘部署等难点,本文在行为识别算法ECO的基础上进行了多方面改进工
学位
互联网的快速发展给现代社会带来了海量的信息,在涉及到处理图像信息的许多领域,图像分析人员所面临的一个巨大挑战成为了如何从海量图片中快速高效地获取感兴趣的目标图像。尽管计算机视觉系统已经可以快速而准确地完成目标识别,然而对于一些低质图片的处理效果仍达不到理想状态。脑机接口可以将用户的大脑活动模式转换成一个简单的消息或指令,是一种新的人机交互方式。基于快速序列视觉呈现(RSVP)范式的脑机接口系统为利
学位
近年来,虚拟现实(Virtual reality,VR)技术得到了广泛的关注,并且随着元宇宙概念的兴起,再次将虚拟现实推向了高峰。全景图像在虚拟现实构建沉浸式场景时具有极其重要的作用,目前的全景图像是由多个相机拍摄的小视点图像通过拼接技术合成的,因此拼接图像的质量好坏直接关系到VR沉浸式体验的效果。但目前拼接算法的水平参差不齐,拼接后的全景图像质量存在很大差异,且同一拼接算法在不同的场景下也呈现出
学位
高光谱图像(hyper spectral image,HSI)是一类包含几十到几百个光谱波段的特殊图像。由于其包含了反映物质特性的光谱信息,被广泛地运用于物质的识别与分类等重要领域。然而,受限于高光谱成像设备的元器件的物理极限和工作环境等诸多因素的限制,高光谱成像设备很难直接从环境中获取到高空间分辨率的高光谱图像。为了获取高空间分辨率的高光谱图像,人们尝试着从信号处理的软件方法着手,尝试着将低空间
学位