注意力生成对抗网络在单幅图像雨滴去除中的应用研究

来源 :云南大学 | 被引量 : 0次 | 上传用户:sundianjusdyg
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
雨天是常见的恶劣天气,图像受雨滴影响会产生严重退化,导致计算机自动检测、跟踪等性能的降低。生成对抗网络具有强大的特征学习和特征表达能力,将其与注意力机制相结合,可以根据注意力机制所关注的区域,以对抗训练的思想生成更高质量的图像,为计算机视觉应用提供了新的技术和手段。它在图像的雨滴去除中,已取得较好效果。去除雨滴的影响,还原背景场景,将有利于图像后续处理。为此,本文主要工作内容如下:首先,本文对基于注意力生成对抗网络的雨滴去除方法进行分析,该方法将注意力机制与生成对抗网络相结合,在进行雨滴去除时,采用雨滴图像与干净图像相减来引导循环网络生成雨滴注意力图,只关注了雨滴区域的恢复,忽略了雨滴图像中背景物体的边缘结构,导致去雨之后的边缘细节模糊。本文针对此不足,利用导向图滤波获取雨滴区域及边缘信息,采用循环神经网络引导雨滴区域生成雨滴注意力图,将雨滴注意力图加入到生成对抗网络模型中训练,并在模型中引入特征空间、像素空间上的损失,以调整雨滴去除效果的细节,使得生成图像更加清晰。分别在雨滴密集和稀疏的两种情况下,将本文方法与其他去雨方法进行对比实验,并将实验结果进行分析比较。实验表明,本文优化的去雨方法在视觉效果和客观指标上具有较好的效果。然后,将优化后的雨滴去除方法应用于视频图像去雨中。考虑到视频去雨的实效性与视频相邻帧之间的较小差异,本文对视频分帧后,只对奇数帧进行操作,先对雨滴视频帧进行压缩,然后用优化之后的注意力生成对抗网络去雨方法进行雨滴去除。实验结果表明本文方法应用到窗内拍摄的雨滴视频具有较好的雨滴去除效果。
其他文献
中文辅助学习是中文自然语言处理的研究热点和难点。近年来,日益增加的中文学习者让其应用价值不断提升。众多的中文学习场景衍生出各种子问题,如语法侦错,句子剖析,论据推理等。从语言学的角度,这些问题可被分为语法和语义两类。本文选择语法纠错和论据推理作为语法和语义两类问题的代表,总结了当前研究现状下的不足之处与难点,并据此提出改进方法。主要的工作如下:(1)针对语法侦错中训练数据缺失的难点,本文提出了一种
目的:基于帕金森病(PD)的神经炎症免疫学说,多种机制和信号通路参与其中。本研究主要探讨NF-κB与PD形成,脑内炎症因子表达和多巴胺(DA)能神经元损伤间的联系,以及介导的神经
随着社会的不断进步、发展,优化问题逐渐受到越来越多的关注,多目标优化问题是日常生活中常见的一种优化问题,在科学研究领域和工程应用中,都有着较为重要的意义。进化算法和
数据量暴增的信息时代,内存存储已经成为许多数据密集型应用程序的关键组件,如OLTP和OLAP。然而,内存存储面临两方面技术挑战:一方面,内存系统中数据可能永久丢失或暂时不可用;另一方面,用户访问模式会导致内存数据的访问热度变化,而静态数据布局无法匹配动态访问热度变化。对于前者,需要引入冗余方案;对于后者,需要根据访问热度动态调整内存数据布局。因此,针对内存数据集的冗余方案及自适应数据布局问题进行研
为了适应国家“大众创业”、“万众创新”的战略,各高校纷纷开展创业教育,学者和专家也纷纷聚焦创业教育研究。但是在创业教育研究中,大多数学者关注的是“创业怎么教”,“创
推荐系统已广泛应用在电子商务、社交媒体、教育科研等诸多领域,有效应对了信息超载问题;然而,数据稀疏性一直制约着推荐系统的效果,利用辅助信息如内容信息、用户社交网络能有效缓解数据稀疏问题的副作用,但如何有效地利用这些信息增强推荐效果仍是一个开放性问题。此外,随着深度学习、度量学习等技术的进步,研究如何融合新技术和辅助信息来构建新型推荐系统成为新的挑战。为此,本文针对推荐系统中的评分预测和Top-n推
机器人移动履行系统(RMFS)即“货到人”拣选系统,由于其较好的可扩展性和较低的运转成本,随着人力成本的提升,其在仓库升级中也扮演着越来越重要的角色。在正常的拣选过程中,
在新的市场环境下,市场上的竞争越来越激烈,形式也越来越多样,竞争不仅仅再只局限于企业之间,现在供应链之间的竞争也成为市场竞争的主流。现在供应链管理的主要竞争都集中在采购和供应商管理上。好的供应链管理能够降低采购成本,提升企业的效益空间。本文的重点的研究对象是作为供应链管理中的一个核心的问题,供应商的管理的问题,想找出关键旨在使供应商管理如何提升企业的绩效,以及在供应商管理中应该从那些方面出发才能帮
近年来,为了提升时延敏感型应用的用户体验,越来越多的数据存放在集群系统的内存中,从而衍生出内存集群。内存集群受到多种异构访问因素的影响,而现有调度方案通常仅考虑单一异构性因素,因此不能很好地解决内存集群中由异构访问引发的性能问题。针对上述问题,对内存集群调度方案进行研究。经分析,影响内存集群的异构访问因素至少包括数据位置(数据位于本地机架或者远程机架)、节点负载(节点处于轻载或者重载状态)以及分块
特异性识别分子对许多生物化学过程是必要的,因此对于灵敏的生物分子传感方法的需求大大增加。尤其是在太赫兹波段,许多生物化学分子发生分子内和分子间的振动,使得这一波段