基于生成式对抗网络的图像去雨雪算法研究

来源 :江苏大学 | 被引量 : 0次 | 上传用户:lsj111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
雨雪天作为常见的恶劣天气,不仅会降低所采集图像的质量,还会严重影响计算机视觉算法的可靠性。因此,对图像除雨和除雪的研究在计算机视觉领域有着重要的应用价值。但由于其本身存在的不适定性,图像的除雨雪一直是一个具有挑战性的问题,并在近些年引起了学术界广泛的关注。本文以港口码头集装箱自动化装卸过程中的图像作为研究对象,使用基于生成式对抗网络的算法,围绕单幅图像的去雨和去雪任务开展研究,并取得了较好的实验效果。本文的主要工作内容如下:
  (1)在条件生成式对抗网络(Conditional Generative Adversarial Networks)的基础上,针对生成图像细节纹理质量不高,图像过于平滑的问题,对网络的损失函数进行了改进,将激活层之前的特征图作为感知损失函数计算的依据,以此提高网络生成图像的质量。该改进的特点在于能够获取更多的图像信息,改善图像在通过较深网络,特别是在经过激活层之后出现的特征图像稀疏问题。本文将所提出方法与基于卷积网络、基于先验信息方法、基于稀疏编码的方法进行对比实验,并比较了试验结果,充分证明了本文提出的基于CGAN网络算法的可行性和有效性。
  (2)在注意力生成式对抗网络(Attentive Generative Adversarial Networks)的基础上,针对网络在训练中容易出现的模型坍塌问题,本文对算法中的判别器进行了改进,在其中加入了谱归一化(Spectral Normalization)的操作,并使用两个尺度更新规则(TTUR),避免使用谱归一化导致的生成器和判别器训练速率不一致的问题。该改进的特点在于能够提高网络在训练过程中的稳定性,改善模型以往容易出现的不收敛的情况。实验结果表明,本文提出的算法在训练过程中模型表现平稳,收敛速度快,并与基于导向滤波以及基于卷积网络的方法进行了实验对比,就相关数据进行了比较,充分证明了本文提出的基于注意力GAN网络算法的可行性和有效性。
  (3)为了更好模拟算法的实际应用场景,本文首先通过在集装箱吊具上安装工业相机的方式,来采集港口实际装卸过程的视频图像数据,并将所得视频数据按固定时长间隔截取图像,作为数据集中的原始图像部分。其次在原始图像中批量添加带有随机高斯噪声的雨线和雪花,使图像能够更好模拟真实雨天和雪天的成像效果,保证了所添加雨雪痕迹的多样性。然后将其与原始图像一一对应,组成可用于网络训练的图像对。其中,数据集分成了训练集和测试集两部分,训练集用于模型的训练,测试集则用于检验模型的最终性能。实验证明,本文制作的数据集使模型在特定场景中取得了更好的去雨雪效果。
其他文献
【摘 要】内蒙古半农半牧区是生态环境被破坏非常严重的地区。针对此实行的禁牧圈养政策,对当地农牧民的生产生活产生的一些影响,引起了农牧民生产生活各个方面的改变。本文主要论述了农牧民生产生活产生的改变及其改变的影响因素。  【关键词】禁牧圈养;半农半牧区;生产生活;影响  0.引言  内蒙古草地资源丰富,但从20世纪80年代以来,由于自然因素和不合理的人为生产活动的作用,草原环境急速恶化,半农半牧区草
期刊
【摘 要】物理—事理—人理方法论(Wuli Shili Renli System Approach)简称为WSR方法论,是试图从东方思辨的角度提出的方法论,是一种解决复杂问题的工具,是一种处理复杂性问题的有效的认识方法和处理模式。基于WSR (物理-事理-人理)系统方法论,将现代教育技术中心评价分为物理、事理、人理三个阶段进行分析。对WSR在现代教育技术中心评价指标体系的建立中的应用进行了探究。 
期刊
【摘 要】當今社会是信息社会,充分利用高职院校校园内各种宣传教育阵地,发挥党政工团的合力作用和校园活动、网络环境、管理服务的载体作用,并加强对这些宣传教育媒体的规范管理,是丰富校园宣传媒体的载体和形式,也是弘扬校园文化、传承校园精神的纽带。本文以兰州资源环境职业技术学院为例,探究高职院校校园网络媒体管理的途径,剖析校园媒体在推动学校的改革、建设和发展中的作用,同时,为校园媒体的建设与发展提供理论依
期刊
【摘 要】为满足职业技能型的外贸人才需求,加快地方对外贸易的快速发展,高职不仅开设了国贸专业,而且一些非国贸专业也增开了《国际贸易实务》课程。对于这些非国贸专业《国际贸易实务》课程教学内容体系的设置,在遵循传统国贸教学体系的基础上,应配合相关专业的需求,做到水乳交融,充分体现出课程教学内容体系设置的适应性。  【关键词】非国贸专业;教学内容体系;专业适应性  为配合高职人才培养的需要,许多高职院校
期刊
【摘 要】一直以来,有效降低综合厂用电量是个大企业的重中之重,也是需要攻克的难题,而对于广州大学城华电新能源公司,综合厂用电率有效的控制在在2.0%左右,虽然相对燃煤、及燃油类电厂来说,这是想都不敢想的事,但是对于我们新能源电厂来说,还是有降低的空间,也有降低的手段。只是调整难度相对较大,调整风险相对较大,调整方式相对较少。通过这次分析,力争将我厂综合厂用电率控制在1.92%以下,尽量控制在1.8
期刊
【摘 要】随着人们生活水平的提高,大家对织物的舒适性能的要求越来越高。如今防静电织物日益受宠,它的性能要求除了抗静电性能外,其舒适性能也不可忽视。本论文通过对防静电面料进行各种舒适性能测试,分析了影响其舒适性的各种因素。并采用模糊数学法,从整体上综合评判其舒适性能的好坏,为人们生活运用抗静电面料提供参考。  【关键词】防静电;导电丝;舒适性;模糊数学;综合评判  0.前言  静电在我们周围到处可见
期刊
【摘 要】法律与民意的冲突问题似乎一直是一个热门话题,前些年的泸州“二奶”遗赠案、刘涌案,最近的药家鑫案、吴英案、李昌奎案,甚至至今尚存争议的赛锐案都反映出法律与民意的严重对立。法律与民意的冲突究竟源于何由?这种冲突该如何解决?本文以李昌奎案为背景,分析法律与民意冲突产生的原因以及冲突解决方式。希望运用各种综合手段,在立法、司法、执法活动中做到情理法的沟通与融合。  【关键词】法律;民意;冲突;协
期刊
【摘 要】10kV高压开关柜在电力系统中的应用是极其广泛。本文主要对10kV高压开关柜结构分析及改进措施进行了探讨分析,可供同行参考。  【关键词】高压开关柜;结构分析;改进措施  在电力系统中,l0kV高压开关柜的应用极其广泛。由于电力系统用户的需求五花八门,作为制造厂家,我们不得不针对用户的需求,为用户量身定做。这就要求我们必须真正深刻地理解相关的国家标准、部颁标准和标准柜型的设计要求。在十年
期刊
目前基于点云的室内场景认知与理解遇到的难题主要包括:(1)实测点云的散乱性对于室内场景形状分割、场景分析及理解造成了严重影响;(2)缺乏从全局角度对室内场景的表达,尤其缺乏基于复杂几何形状的场景全局表达,妨碍了对场景的理解。为此,本文重点以普遍存在的散乱点云为处理对象,开展了室内场景认知与理解的相关研究,相关成果概括如下:
  (1)提出一种基于切片的散乱点云数据规则化预处理方法
  三维激光扫描设备产生的点云数据是一种包含了大量噪声和外点的散乱数据,一些经典形状分析及提取算法不能有效地直接应
内嵌式永磁同步电机因其高效率,高功率密度和宽调速范围的优势在多种工业领域受到了广泛的研究与应用;随着这些领域对于安全可靠性能要求的提高,研究多相电机驱动系统及其容错控制具有重要意义。本文以五相内嵌式永磁同步电机(Interior Permanent-Magnet Synchronous Motor,IPMSM)为研究对象,重点分析了绕组开路故障后电机复杂的数学建模以及逆变器的工作原理,研究了基于模型预测控制(Model Predictive Control,MPC)的容错控制策略,在改善单相开路故障的同时