基于深度学习的雨天图像修复研究

来源 :广西师范大学 | 被引量 : 0次 | 上传用户:zhuce121566
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能的快速发展,室外机器视觉系统已广泛应用于各种生活场景,比如在交通场景监控、智能自动驾驶和目标跟踪等各个领域发挥着至关重要的作用。然而这些智能系统研究之初忽略了户外恶劣天气的干扰,如雾霾、下雨、和下雪等。尤其是雨天干扰会使系统捕获的图像模糊不清,甚至雨滴覆盖的区域背景信息完全丢失,进而影响视觉算法的鲁棒性。因此从模糊不清的雨天图像中恢复图像的清晰度是很有研究意义与价值。目前,已经有很多方法被提出用来处理雨天图像修复问题。这些方法主要是基于图像滤波和分解的无监督学习和基于深度学习的有监督学习。现有的方法存在以下四个问题:(1)大雨环境下雨条纹不能完全去除;(2)忽略上下文信息之间的相关性;(3)损失函数是基于欧氏距离,而欧氏距离与观察者视觉感知到的图像质量的相关性很差;(4)现有的方法基于像素的回归过程,缺乏维持雨滴去除和图像修复之间的平衡。本文根据所阅读国内外大量的相关文献,利用深度学习的方法研究雨天图像修复问题。本文的主要研究内容和研究方法如下:1.通过分析现有的问题,对雨图像的形成进行数学建模,本文提出一个双循环密集神经去雨网络(RLDNet)。RLDNet结合了密集网络(Dense Net)和长短记忆网络(LSTM)来提取雨纹信息,同时引入双重循环方案,以促进后续雨条纹和相对清晰图像的更好的信息重用。此外,本文结合曼哈顿距离(1)、欧式距离(2)和构相似度(SSIM)作为模型的目标函数以确保模型的优化更好。大量实验证明提出的模型明显优于现有的方法,而且在相似的任务同样有效,即图像去噪。2.针对去除雨滴问题,本文提出一个以分层监督网络模型(HSNet)为骨架的两步式生成对抗网络来去除图像上的雨滴,同时该网络也适用于去除雨纹。其中,HSNet将Dense Net和U-Net网络进行融合,且在不同尺度层进行监督,能较好的提升雨纹表征能力。更重要地,本文设计的生成器分为两个阶段,第一阶段为图像去雨阶段,使用HSNet去学习雨滴特征,从而去除雨滴;第二阶段为图像修复阶段,进一步将HSNet与注意力机制相结合,去修复第一阶段去除雨滴后得到的图像中所丢失的信息,得到干净的清晰的图像。在多个数据集上进行实验,实验结果表明,提出的方法优于现有的图像去雨滴方法。
其他文献
主题式教学模式的实施,重在以教学中的关键问题、核心议题、重点话题为统领,通过对每一项教学主题的精准化、精细化、精确化构建,引领学生开展自主性、针对性、深层次、多元化探究,以切实提升教学实效,发展学生认知。因此,教师在开展小学数学教学指导与设计时,应以深度构建主题式教学模式为引领,创新教学模式、优化教学途径、变革教学策略,使学生在多元、深入、丰富的教学主题与学习议题驱使下,积极开展对数学问题的探究、
期刊
<正>公司简介浙江聚和化工有限公司坐落在旅游圣地浙西龙游县城南工业园区内,与世界九大奇观龙游石窟相隔仅3公里,本公司水陆交通便利,是浙赣铁路线,杭、新、景,龙、丽温和杭、金、衢高速公路的必经路线,为广大客户提供强有力的运输保证。浙江聚和化工有限公司现有职工100多人。其中科技人员15人,公司拥有固定资产2000万元,厂区占地面积为4万平方米,主要产品有活性氧化镁、氢氧化镁、碳酸镁、高品
会议
民航标准化文件作为高度规范的行业规范性文件,体现了民航行业平均技术水平,在服务交通强国实践中发挥着重要作用。文章结合民航标准化文件编辑加工过程中所遇到的突出问题,对标准化文件的编辑加工原则和路径进行分析,指出对于此类书稿编辑人员应严格遵照国家、行业标准化文件的编写指南对语言文字、图表辅文、排版格式进行规范修改,基于编辑加工一致性原则规范术语使用、严密标准化文件作为一个整体的语言逻辑表述,同时在充分
期刊
近年来,随着计算机视觉技术的不断发展,视频目标跟踪已经成为计算机视觉领域中一个重要的研究课题,并且在视频监控、智能人机交互、无人驾驶和战场态势侦查等领域具有广泛的应用。传统的视频目标跟踪方法存在跟踪效果较差、网络结构复杂以及复杂场景无法准确跟踪等问题。随着深度学习视频目标跟踪方法的发展,全卷积孪生网络视频目标跟踪算法(Full-Convolutional Siamese Network,SiamF
学位
海洋二号卫星雷达高度计(HY-2/RA)是海洋二号卫星主载荷之一,其主要功能是用来测量海面高度、有效波高及海面风速等海洋基本要素。HY-2/RA测量数据的进一步反演结果,可以应用于海洋地球物理学、海洋动力学、海洋气候与环境监测和海冰监测等方面的研究和应用。
会议
全球淡水资源短缺,水污染问题日益严重。相较于传统水处理方法,膜分离技术由于其低成本、高效率、无二次污染在废水处理领域得广泛应用。在制膜材料中,聚偏氟乙烯(PVDF)因良好的热稳定性、化学稳定性及较高机械性能受到广泛关注。通过共混的方式制备出膜材料具有膜结构均一、化学组成基本一致、分离效果好等优点。在有机共混改性材料中,聚离子液体(PIL)是一类结构中含有离子液体(IL)单体的聚合物,兼具了离子液体
学位
星载雷达高度计是重要的微波遥感器,在科学研究中有很高的价值,也有广阔的商业应用前景。高度计要求以厘米级的精度测量卫星到海平面的距离,对系统的设计指标和稳定性提出了很高的要求。在发射前要在地面对高度计进行严格的测试和定标,但在轨运行时,由于温漂、老化、电磁干扰等原因,仪器的硬件性能会产生变化,因此会带来测高误差,需要对仪器系统的延时和增益相对波动进行监测和修正的工作,为此需要在轨运行期间配置仪器的内
会议
MAX/金属基自润滑复合涂层具有优异的力学性能和摩擦学性能,MAX相的加入拓宽了金属基复合涂层的研究和应用范围。首先分析MAX/金属基复合涂层在摩擦磨损过程中自润滑特性是如何起作用的,分别从MAX相的本质结构说明自润滑性能的存在,摩擦过程中润滑膜的生成说明提高减摩润滑性能的原因。随后阐述近年常见几种MAX相涂层以及MAX/金属基复合涂层的制备和特性,包括Ti2AlC、Cr2AlC涂层、高低温金属基
期刊
当前,我国正处于社会经济发展的关键时期。随着现代化的纵深发展和全球化进程的加速,各类突发事件也在不断增多,尤其是突发公共卫生事件,此类事件的频发对社会发展以及人类生活造成了极大影响。突发公共卫生事件可以说是一场全人类的灾难,这样规模的灾难足以对人类的日常生活产生深远影响,导致个人权利和公共利益失衡、社会秩序失范等等,进而产生道德风险。在突发公共卫生事件中,每个人都是潜在的或者现实的“受害者”或“传
学位
<正>全面推进大中小学课程思政一体化建设,是落实立德树人根本任务的战略举措,是全面提高人才培养质量的首要任务,也是完善教育的价值逻辑、实现民族复兴大业以及人的自由全面发展的重要保证。大中小学课程思政一体化建设的理念引领教育的目的在于培养人才,为学生的认知注入新的理念和知识,使其更好地认知自我和世界,树立正确的世界观、人生观和价值观。同时,
期刊