基于生成式对抗网络的运动模糊图像复原研究

来源 :深圳大学 | 被引量 : 0次 | 上传用户:chengxiulong33
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
运动模糊是最常见的模糊类型之一。在拍摄过程中,如果摄像机和物体发生相对运动并且此时摄像机快门较慢时,就会造成运动模糊。运动模糊会影响图像观感,并且会造成图像信息丢失从而对后续诸多算法造成精度下降等影响。由于运动模糊的广泛存在以及目前模糊复原算法仍然无法很好地复原图像,如何从严重模糊的图像中复原得到清晰图像仍然是图像处理领域一个热门研究方向。近几年利用深度学习算法进行模糊图像复原的研究也取得了一些成果。本文开展了基于生成式对抗网络的运动模糊图像复原的研究,主要研究内容包括:(1)论述了传统模糊图像修复算法以及基于深度学习的模糊图像复原算法的发展进程和存在问题,详细描述了深度学习以及基于生成式对抗网络的运动模糊图像复原算法的原理。(2)提出了基于增强型生成式对抗网络的运动模糊图像复原算法。利用缩放卷积(resize convoluation)替代反卷积作为图像上采样策略,有效地消除了过去基于卷积神经网络进行运动模糊图像复原的方法中由于反卷积不均匀重叠而造成的棋盘效应问题;利用压缩激励网络可以提取特征通道权重的特性,将压缩激励网络与残差网络结合为压缩激励残差网络模块(SE-ResBlock);采用多维度的损失函数设计,使得网络最终损失函数能够同时对比像素级别、高维特征级别以及梯度域的图像差异,有效优化了算法去除运动模糊的能力。(3)提出了基于多帧图像和三维变形卷积的运动模糊视频复原算法——VDGAN。由于连续视频图像除了帧内信息外,还包含了大量的帧间信息,上下帧之间通常存在关联。当输入为视频图像时,增强型生成式对抗网络没办法利用多帧信息帮助运动模糊图像复原。因此,可以将当前帧与其前后各2帧图像共同作为输入,利用网络模型最终合成的一帧特征图与当前帧的叠加作为最终输出,VDGAN能够有效地利用多帧信息来提高运动模糊图像复原;此外,提出了三维变形卷积,通过立体变形的采样网格,三维变形卷积能够有效地提取视频图像中的时空信息,并且可以对由于运动模糊而造成的视频图像物体特征形变更好地进行建模,改进了二维标准卷积的不足。(4)针对已提出的模型算法进行模型轻量化处理。深度学习优越的性能很大程度是依赖于深度网络庞大的参数量,但是同时也带来了很多问题,例如计算资源需求大、计算时间长、模型磁盘占用空间多、深度网络的运算成本相对较高等问题。为了有效解决这些问题,提出了将网络模型进行轻量化处理,降低网络参数量等加速方法,提升了网络效率。
其他文献
我国诗史长达三千余年,自涎生第一部诗歌选集《诗经》的先秦时期到现、当代.名家辈出,
通过选择培养基筛选出混合硫酸盐还原菌,并研究其最适的生长条件,考察了接种量、温度、最初pH、Fe2+对其生长的影响。结果表明,在接种量为10%,温度为35℃,初始pH为6.5,培养基
以生态服务功能价值当量因子法估算了2008—2017年甘肃省农业生态服务静态价值构成和不同类型生态服务功能静态价值,在此基础上,考虑到农业生态服务的空间动态性,根据聚类分
<正>《训世评话》上下两卷,是继《老乞大》、《朴通事》之后又一古朝鲜学习汉语的教科书。作者为古朝鲜汉语译学家李边(1391—1473),成书年代约相当于明代成化年间。全书共编
期刊
<正>新课改的实施促使广大中学物理教师需要面向全体学生施教,研究教学方法,运用更加有效的教学方法来促进学生素质的全面发展。众所周知,中学物理则是一门逻辑思维比较严密
会议
【正】张祜(789~①-约853~②),一名"祜",误,字承吉,郡望清河(今属河北),或曰南阳(今属河南)人。他一生历经德宗、顺宗、宪宗、穆宗、敬宗、文宗、武宗、宣宗八朝,是晚唐著名
对于开设全日制MBA课程的商学院来说,2006年MBA课程全球申请人数的统计数据远远胜过此前两年。商学院的院长们期望,这一趋势持续到今明两年。
据初步统计,陈白沙的田园诗大约有三百首,从数量上看在他的全部诗歌中占第二位(白沙作品中交游诗最多),可以说是白沙诗歌的主要组成部分之一。对白沙文学来说,他的田园诗具有颇为
湖北省荆门市郭店出土战国中期楚简有《汤(唐)吴(虞)之道》一篇,有学者以为应改称《唐虞》该篇讲述尧、舜治理天下的事迹,及其具有的仁、义、忠、敬、孝、悌、爱亲、尊贤、爱民
【正】《清史稿》是研究清代人物的重要史料。但在传统正史系列中,《清史稿》质量欠佳,舛误较多,亦为学界共识,其《循吏传》亦未能幸免。然而《清史稿》毕竟是一部有着较大影