基于深度残差生成对抗网络的单幅图像去雨算法研究

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:pangzd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
恶劣的天气条件会导致能见度下降,极大的影响获取的图像的内容和颜色。例如雨作为一种常见的天气状况,在户外拍摄时,雨水条纹会严重损害图像质量。雨图像中最常见的退化为在小区域产生严重的强度波动,从而阻碍和模糊场景。雨水的存在极大地阻碍了视觉系统应用程序的工作表现,因为它们通常依赖于干净的图像作为输入。去除雨水不仅能提高图像的视觉感知质量,也有利于各种高级视觉任务,如目标检测和图像识别。因此图像去雨技术的研究就变得十分有必要。针对图像去雨问题,本文提出了两种不同的研究方法:双U-Net生成对抗网络(Double U-Net Generative Adversarial Network,DU-GAN)的单图像去雨方法;基于残差网络的多级子网络(Multi Scale Progressive Residual Network,MSRNet)的单幅图像去雨方法。本文的主要贡献为:(1)为了从有雨图像无失真的得到无雨图像,减少图像结构信息丢失的问题,基于生成对抗网络(Generative Adversarial Network,GAN)提出了一种双U-Net的生成对抗网络模型进行图像去雨。在网络模型中使用两个U-Net级联作为生成器,能够明显提高生成图像质量。此外,本文还使用更符合人类视觉效果的(?)1和结构相似度损失函数作为生成器的损失函数。通过在合成有雨图像和真实有雨图像数据集上的实验证明,此方法效果优于其它先进的去雨方法,能够有效的从有雨图像中获得无雨图像。(2)为了缓解过度或不充分地去雨问题,本文没有明确地设计网络估计雨痕的密度,而是提出了一种基于残差网络的多级子网络的单幅图像去雨方法。首先在大尺度水平的子网络上去除大雨条纹;再减小网络的感受野,经由较小的感受野的子网络,从降雨图像中去除较小尺度的雨痕;最后,将去雨后的图像经由一个小感受野的子网络处理,恢复图像的背景细节。由于恢复的图像与其雨图像之间的残差可以表示缺失的背景细节和雨区域,本文利用残差图像作为注意图和待处理图像共同作为下一级子网络的输入。通过这种方式,本文的网络可以区分哪些区域被雨水污染,然后根据注意图的权重(即残差)去除雨水条纹。通过大量实验证明,该算法能获得最佳的视觉效果。在雨水去除过程中,MSRNet能逐步将雨水条纹从雨水图像中分离出来,有效解决了雨水条纹重叠的问题。
其他文献
铜作为最常见的有色金属之一,因其具有良好的延展性、抗拉性以及耐蚀性等一系列优点,在电子电气、交通运输、机械制造等行业中得到了广泛的应用。高纯铜相比于一般的铜材料具有更加优异的物理性能,在高精尖技术领域如超导、航空航天中甚至能被用来代替一些价格高昂的稀有金属材料。随着我国产业升级的进行,各种工程材料服役的新环境也愈加苛刻。高强载荷下非铁磁性金属的应力损伤作为材料损伤断裂的一种典型方式,也是与材料使用
学位
航空航天等领域关键材料或器件,质量要求高,需实施可靠的检测。超声检测具有穿透能力强、检测成本低、材料内部缺陷检测灵敏度和准确率高等优点,得到了广泛的应用。随着航空航天装备性能的不断提升,对缺陷检出量级提出了更高的要求,需实现微小缺陷的检测能力。微小缺陷超声检测与常规超声检测不同,其检出能力受信号采集噪声、图像噪声和各种随机噪声等影响更明显,各种噪声干扰导致不能够正确识别微小缺陷。现有商业化设备只能
学位
为了解决磁声发射检测技术中存在的实验仪器参数设计固定、传统时域信号特征量无法准确反映信号特性等问题,本文在充分分析磁声发射信号影响因素的基础上,优化了磁声发射检测装置;通过对实验得到磁声发射检测信号进行特征分析,提出了基于样本熵的特征提取方法,将其和无量纲指标相结合,构造出抗噪声能力强、受工况影响小的复合无量纲指标。本文主要工作内容如下:通过分析磁声发射检测技术的研究现状,明确了目前磁声发射检测技
学位
涡轮叶片是航空发动机中的核心部件之一,无损检测是控制涡轮叶片生产质量的关键技术,涡轮叶片中微裂纹会在服役过程中受疲劳因素影响而扩展,甚至造成叶片断裂,针对涡轮叶片微裂纹进行无损检测对保障飞行安全性有重要意义。本文以航空发动机涡轮叶片为对象,以涡流检测和X射线成像检测两种方法开展涡轮叶片微裂纹无损检测试验。针对涡轮叶片微裂纹检测问题,首先开展了低压涡轮叶片进气边及排气边微小缺陷的涡流检测研究,确定涡
学位
一般多目标优化问题需要同时优化的目标数通常在2个或3个,当目标数超过3个时,多目标优化问题就会被称为高维多目标优化问题。多目标优化问题的多个目标之间相互冲突,提升其中一个目标的性能往往会使得其他目标的性能下降,无法获得单一最优解,只能获得一组折衷解。另外,随着优化问题中目标数目的增加,如何有效平衡收敛性和多样性也是一个难点。针对处理高维多目标优化问题过程中的困难,本文提出了几种改进算法以提高求解高
学位
X射线检测技术作为一种常规无损检测方法已有近百年历史,随着计算机技术发展,以平板探测器为主流的数字射线技术已得到了广泛应用。然而在工业检测领域受透照条件、现场环境等因素影响,普通胶片仍然有着无法替代的地位。如何实现这些胶片数字化,便于计算机存贮和传输,实现缺陷智能识别,成为传统胶片使用过程中亟需解决的关键问题。本文以平板焊缝X射线检测胶片为对象,通过扫描仪实现图像数字化。通过研究图像处理和机器学习
学位
固体氧化物燃料电池(Solid Oxide Fuel Cell,SOFC)作为一种高温电化学装置,具有清洁高效、余热利用率高、燃料选择广泛等优点。然而,SOFC的大规模商业化受到成本、性能、耐久性的限制。为了解决这些问题,不仅仅需要对于各组分材料的性能进行优化,同时也需要对电极的微观结构进行优化,优异的电化学性能与SOFC材料在微纳米尺度上的结构紧密相关。因此,本文利用高分辨X射线CT技术获取了钇
学位
图像序列光流计算是从连续帧图像中估计难以直接获得的稠密像素点二维运动矢量,由于光流既包含了图像中目标与场景的运动参数,还携带了丰富的结构信息,因此是图像处理和计算机视觉领域的一项重要研究任务,研究成果被广泛应用于动作识别、目标检测、三维重建、自动驾驶以及卫星云图分析等领域,具有广泛的应用前景和重要的应用价值。近年来,随着以卷积神经网络为代表的深度学习理论与方法的快速发展,基于深度学习的光流计算技术
学位
裂纹是工程结构中的典型缺陷,其存在会影响结构的承载力、适用性和耐久性,甚至可能会造成结构物的垮塌等严重事故。因此,快速准确识别结构中的裂纹是保障结构可靠的重要措施之一,相关研究具有重要的理论价值和应用前景。凭借高效率、高精度、低成本和适用性强等特点,数值技术与人工智能算法的协同研究为裂纹识别提供了新途径。本文将扩展有限元法(XFEM)分别与误差反向传播多层前馈(BP)神经网络算法和经遗传算法(GA
学位
脑部磁共振成像(MRI)的脑组织提取是将脑组织与非脑组织分离出来的过程,是神经影像分析领域中的一项重要的预处理步骤。快速、稳定、精度的脑组织提取是后续神经影像分析的必要条件。脑部MRI图像处理存在以下难点:1、由于成像条件不同,脑部MRI图像常出现低对比度、低信噪比和低强度问题;2、由于运动和场偏影响,脑部MRI图像常出现伪影和灰度分布不均匀问题;3、由于脑组织与非脑组织之间的灰度差异较小,甚至出
学位