基于生成对抗网络的星载SAR图像到光学图像的映射研究

来源 :南京航空航天大学 | 被引量 : 0次 | 上传用户:felixjun
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着工业、农业、林业的发展,对地观测需求日益提高,提高对地观测效率成为了科研热点。对地观测需要获取地面遥感图像,而遥感图像的种类主要有两种,可见光及近红外波段的光学遥感图像和微波波段的 SAR 遥感图像。SAR 图像具有全天时全天候的优势,可以在各种天气环境,各种时间下对地观测。然而SAR图像由于成像机理的原因,难以肉眼识别,因此有 90%以上的 SAR 图像由于难以标注未被利用。而光学图像恰好相反,易于肉眼分辨却难以全天候全天时获取。因此,如果能够将大规模的SAR图像数据转换为方便标注的光学图像,这将对星载SAR遥感地物识别分类带来巨大的帮助。本文研究了从SAR遥感图像到光学遥感图像映射的生成网络方法,具体创新性结果如下:
  针对 SAR-光学图像的共同特征提取,提出图像配对任务,设计了基于双路残差配对的特征提取网络,利用更少的网络参数量,达到了更好的分类识别结果。该算法通过判断 SAR-光学图像对是否配对,提取 SAR-光学图像的共同特征。本文提出的双路残差网络模型,使用了双路特征提取模块、残差基本模块和全卷积结构。从原始数据开始训练,实验结果表明,在使用了更少的网络参数量的同时,在图像对是否配对的二分类任务中,达到了更高的准确率。
  针对SAR-光学图像的差异特征提取,提出了模态分类任务和地物分类任务,设计微调VGG网络模型,在使用了更少的训练时间,达到了更好的分类效果。通过模态分类任务和地物分类任务,对比VGG网络、GoogLeNet、ResNet三种分类网络模型以及微调网络策略和从头训练策略进行差异特征提取的效果。实验结果表明, VGG网络得到了更高的分类精度,微调网络策略能够有效地提高网络的泛化性能,进而提高分类精度。
  针对SAR-光学图像映射,提出了空频一致性生成对抗网络模型框架(SFGAN),使得生成图像的纹理细节更加逼真,道路河流等线特征更加清晰。针对光学图像和SAR图像的成像机制,设计了脊波、离散余弦变换和 VGG 网络的特征损失函数。基于这些特征损失函数,本文提出了空频一致性生成对抗网络模型(SFGAN)。从原始数据进行训练,实验结果表明,本文提出的算法在统计指标和人眼辨识上都取得了更好的结果。本文同时设计了消融实验,验证损失函数的有效性。实验结果表明SFGAN方法能够从较小规模的SAR-光学图像对数据中,学习到匹配关系,从而实现从SAR图像到光学图像的映射。
  综上所述,本文通过分析物理机制,设计了提取星载 SAR-光学图像差异特征和共同特征的网络模型,并基于特征提取网络模型和变换域算法,提出了空频一致性损失函数,实现了从SAR图像到光学图像的映射。
其他文献
无论是在军事上还是民用上,雷达对海面目标的检测都具有重要的意义。然而,海洋环境的复杂性以及海面目标的多样性给海面目标检测造成了一定的困难。机器学习是近年来的研究热点,随着相关理论的不断发展,其应用领域越来越广泛,并已运用于雷达信号处理中。本文先是从经典的机器学习算法出发,通过不同的特征提取方式分别讨论了支持向量机算法(Support Vector Machine,SVM)、K近邻算法算法(k-Ne
学位
合成孔径雷达(SAR)是一种高分辨率成像雷达,具有传统光学成像和红外遥感不具备的全天时全天候工作的特点。视频SAR是对经典SAR成像模式的扩展,继承了传统SAR的优点,同时又有效的扩展了时间维的信息,具有更强的动态信息获取能力。视频SAR将SAR成像技术与视频显示技术相结合,获得连续的SAR图像。论文主要对基于FPGA的视频SAR成像进行研究。本文所做的工作与创新如下:1.针对传统极坐标格式算法存
学位
本文设计了一套适用于2米超声速风洞的导弹虚拟飞行半实物仿真控制系统,与风洞模型支撑装置一起构成导弹风洞试验系统。该系统集指令收发与控制、数据采集与处理、数据分析与显示于一体,为综合研究导弹飞行过程中的运动特性和气动特性提供重要保障。首先,在分析和论证风洞虚拟飞行试验系统方案设计可行性的基础上,根据系统性能和技术指标要求,提出了导弹虚拟飞行半实物仿真控制系统的总体设计方案。基于工业控制计算机和PXI
学位
随着数字图像成像技术的发展,各类新型医学影像拍摄设备日渐普及,医学图像也逐渐成为医生临床诊断的主要依据。传统诊断流程需要医生在观察分析病灶的同时给出诊断结果,一些发病率较高的疾病往往需要临床医生花费大量时间和精力重复地进行观察和诊断,且诊断结果容易受到医生主观因素的影响。因此,一个能够实现图像分割、定位和分类等功能的自动化医学图像分析系统具有重大的临床意义。近几年,机器学习方法和深度学习方法在医学
学位
本文鉴于单通道星载SAR成像和多通道星载SAR高分宽幅成像系统各自的利弊,提出了一种基于双通道收发分置的星载SAR高分宽幅成像方法,其中结合推导的四种信号重构算法,对方位向产生的模糊进行了抑制。然后将地面动目标的相关参数添加到高分宽幅成像的信号重构滤波向量中,推导出了动目标自适应的信号重构滤波向量,并结合相位中心偏置天线算法(DPCA)和空时自适应处理算法(STAP)两种杂波抑制算法,研究了基于高
学位
随着车辆、接入设备的增多以及大量新型无线网络业务的出现,车联网(Internet of Vehicle,Io V)对无线频谱资源的需求日益增长,使得现有固定分配给Io V的频谱资源严重匮乏。针对这一问题,在Io V中引入认知无线电(Cognitive Radio,CR)技术,构建认知车联网,以实现频谱资源的按需动态分配,进而提高频谱利用率。论文针对认知Io V中存在传输协作频谱感知结果时可能出现差
学位
随着近年来无人机技术的发展,搭载视觉传感器的小型无人机以其小巧便捷、成像迅速、成本较低等优势在各行各业得到了越来越多的应用。然而,对其所获取图像的语义分割技术的欠缺仍是限制其进一步应用的瓶颈之一。本文以无人机城市图像的语义分割任务为研究对象,结合卷积神经网络与概率图模型的相关思想,提出了适用于无人机城市图像语义分割的模型,并将此模型通过深度迁移学习应用到机载遥感城市图像的语义分割任务中,具有重要的
现代雷达所处的电磁环境日益复杂多变,这对雷达系统性能及发射波形提出了更高的要求。捷变波形作为能够根据其所处的电磁环境及目标特性实时地改变的信号形式,具备更好的探测性能、低截获性能和抗干扰性能。由于捷变波形的设计自由度远远高于经典波形,其性能也远超经典波形形式。但设计自由度的提高,对捷变波形的设计方法提出了更高的要求。对满足雷达探测需求且具有抗干扰能力的捷变波形优化算法的研究具有重要意义。本文在压制
学位
汽车防撞雷达具有全天候,全天时等优点,成为自动驾驶车辆必不可少的传感器之一,在汽车辅助驾驶领域具有重要应用价值和广阔市场前景。本文围绕77GHz毫米波汽车防撞雷达系统的实现展开了深入研究,主要研究了雷达信号处理、数据处理算法和系统工程实现,并对汽车防撞雷达探测-通信一体化功能进行了拓展研究。本文主要工作如下:(1)本文设计了基于AWR1243+FPGA+DSP平台的汽车防撞雷达系统方案,研究了调频
填充理论是紧随压缩感知理论之后迅速发展起来的,主要致力于解决从不完整的数据信息中补全缺失数据,被广泛应用于图像填充、信号处理、机器学习、计算机视觉等领域。其主要利用矩阵或张量的低秩性质,通过构造对应的核范数最小化优化模型将缺失数据的补全转化为优化问题的求解。本文结合阵列信号处理和频谱数据处理的应用背景,以低秩矩阵填充理论和低秩张量填充理论为基础,首先解决了均匀面阵中部分阵元损坏情况下如何实现有效的
学位