基于生成对抗网络的单帧图像超分辨率重建研究

来源 :北京印刷学院 | 被引量 : 0次 | 上传用户:yzq660511
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
单帧图像的超分辨率重建技术旨在把一幅降质图像恢复为其未降质前的高品质图像。其在卫星遥感、医疗成像、安防监控、图像压缩等领域有普遍应用。近年来,伴随深度学习研究发展,已经形成了一套成熟的单帧图像超分辨率重建技术体系。基于生成对抗网络的超分辨重建技术通过生成网络的与判别网络的博弈对抗思想实现图像重建。在生成网络设计上,现有生成网络模型层数深,参数多,训练与重建成本高;且使用的残差结构并未考虑到神经网络对于图像先验信息的捕获能力,在重建过程中未能更大程度运用图像先验信息。在判别网络设计上,现有判别网络也未对生成网络在短时间内生成高质量图像,VGG结构的判别网络因为训练速度更慢失去对生成图像与真实图像的判别能力情况改进。随生成网络能力增强,其重建的图像可轻易骗过判别网络,使对抗模型崩塌。针对上述问题,本文的主要贡献如下:1、对于SRGAN等生成网络模型参数多,层数深的问题,本文使用注意力机制模型的CBAM模块进行改进。注意力机制可强化网络有用特征,抑制无用特征。将注意力机制引入超分辨生成模型中可增强网络的表现能力,在保证网络重建质量的同时,对生成对抗网络中生成器的网络结构进行优化。在Set5数据集上,引入注意力模块的轻量化生成网络与没用该模块的网络重建效果近乎一致,甚至优于原生成网络,且整体对训练时间需求更小。以Set14与BSD100数据集选用的图片进行重建,图片重建效果也与原网络接近,且重建时间缩短。采用轻量化网络参数也较之前也明显的减少,较原网络减少近38%。2、对图像先验能力改进的问题,提出一种学习图像先验能力更强的递归UNet超分辨生成对抗模型。输入图像先经过亚像素卷积层放大至重建尺寸,再通过两层卷积网络进行特征提取传入递归结构U-Net。U-Net用增加卷积核步长的方法进行下采样,使用亚像素卷积的方法对其进行放大。最后经过两层非线性映射的卷积层将特征图重建为图像。递归传递过程中,下采样与上采样过程间使用跳跃连接进行特征补偿。在判别网络方面,以原VGG结构的判别网络为基础,先使用残差块对输入图像特征提取,后下采样得到更局部的特征,通过全连接层得到分类概率。该结构在Set5、Set14、BSDS100、Uraban100和Manga109五种公开的数据集对重建质量进行评估。经过4倍下采样的超分辨重建后,可以看出其在PSNR与SSIM上有提升。以Set5,Set14,BSDS等五种标准数据集作为基准,在PSNR指标上平均提升1.55d B,在SSIM指标上平均提升0.059。实验表明递归结构的U-Net生成网络比残差结构的生成网络学习图像先验信息能力更强,使用递归结构U-Net设计的超分辨生成对抗网络有效提升了图像重建质量。
其他文献
改革开放后,我国进入城镇化与工业化快速发展时期,在有限的国土空间当中人与地、开发与保护、发展与稳定之间的矛盾与冲突日益尖锐。为统筹我国国土空间内各类开发保护与建设活动、推进绿色可持续的高质量发展,中共中央、国务院建立了国土空间规划体系,并在一系列中央文件中明确提出科学布局生态空间、农业空间与城建空间需以资源环境承载能力和国土空间适宜性评价(“双评价”)为基础。由此可见,国土空间适宜性评价(适宜性评
学位
随着计算机网络通信的飞速发展,在没有严格的网络监管体系下会引发多种损害社会利益的严重问题。数字水印技术逐渐成为信息防伪的有效手段,但目前成熟的水印算法不足以抵抗畸变攻击。为了使水印能够抵抗畸变攻击,本文提出了基于图像特征分块的全息水印嵌入提取算法。首先依据图像特征将载体图像分成不同的子图像特征块,提取每个子图像特征块的SIFT特征点,依据特征点分布位置与稳定性能对载体特征块进行筛选,最终选取所有适
学位
利用半色调单网点(简称印刷量子点)点阵图像实现信息隐藏和印刷信息防伪具有信息记录容量大、隐藏效果好和可满铺等优点,成为印刷信息防伪领域内的研究热点问题。但该方法在信息打印记录过程中,因不可避免地存在漏印、偏移、网点扩大、飞墨等缺陷问题,以及识读设备受光照、拍摄动作抖动等因素影响,往往存在比较严重的误码问题,因此对其进行研究具有重要的应用价值。针对以上问题,本文提出基于多重组合编解码的印刷量子点信息
学位
图像描述任务是对图片通过计算机转化成自然语言的技术研究,换句话说,是对图片文字化的解释技术,这是一项从视觉到文本的交叉综合性研究课题,它对人类在人工智能的发展领域上具有十分重要的意义。传统的基于检索的方式与基于模板的方式,所形成的描述模型产生的语句都具有不灵活、不准确、有局限性等问题。但是,基于深度学习的研究方法所构建的模型生成的语句,则可以很好地解决上述问题,从而也越来越受科研人员的青睐。虽然,
学位
半色调加网算法将连续调图像转化为可印刷输出的二值化图像。该算法在很大程度上决定着印刷图像再现的质量和效果。随着印刷设备和计算机图像处理设备水平的不断提高,半色调加网算法也在不断演进与发展。通过半色调加网算法优化设计,不断探索提高连续调图像打印输出再现效果,一直是本领域的主要研究内容。本文主要研究一种与连续调图像内容最佳匹配的半色调加网算法。该算法基于普通印刷工艺条件,能够更好的再现连续调图像内容(
学位
二十一世纪以来,我国农村农业形势变化加剧,农业产业模式开始注重效率和质量的提升,农业现代化步伐加快。农业技术推广可以提高农业生产的效率与质量,能够加快农业现代化步伐,实现农民增产增收。农业技术推广体系绩效评价是根据合理的评价标准和内容,通过科学的评价方法和途径对绩效评价对象即农业技术推广体系绩效进行评价。本研究从绩效评价分析的结果中发现襄阳市农业技术推广体系中的各种问题,针对绩效问题提出绩效提升的
学位
伴随着工业化的快速推进,自然资源约束趋紧、环境污染加剧、生态系统退化的严峻形势让人们开始重视对生态环境的保护与修复。新型城镇化给城市带来了越来越多的人口,同时也对城市配套基础设施提出了更高要求。为了满足生产生活需求,城市建设用地规模不断扩张,出现了土地利用强度不断加大、用地结构不合理等问题,这些问题对生态环境造成巨大威胁。长江经济带作为国家战略发展区域,其生态环境质量关乎着全国超40%人口的生存与
学位
当今社会,医药行业正在不断发展,人们对药品质量提出了更高的要求,包括内在质量,包装质量等方面。数量规格是否符合标准关乎着消费者的利益问题,药厂作为药品的源产地,其自动化、智能化、数字化的升级较为重要。板装药作为药品中的主流产品,封盒前的药品数量检测环节大多以人工或者传统的自动化检测技术为主,本文设计出了一个基于机器视觉的药板智能计数系统,有助于提高药板计数的效率,降低生产成本。本文主要研究如下内容
学位
目前,我国印刷、包装和出版产业每年总产值约3万亿元,已经是印刷大国、包装大国和出版大国,印刷装备的故障极大地影响了生产效率。随着传统制造企业不断向高质量、高效率方向转型,伴随着科技进步与工业大数据的发展,人工智能技术与先进制造技术相互融合开创了智能制造新途径,成为了新一轮工业革命的中坚力量,让印刷装备智能诊断成为可能。在此背景下,本文研究了基于深度学习的印刷装备诊断系统,提出了轴承健康状态评估算法
学位
近年来,新能源产业不断发展,锂电池作为新能源产品的核心部件,目前广泛应用于汽车、手机、医疗产品、军事装备、航空航天等各个行业中。在锂电池的生产过程中极耳R角发挥着重要作用,其中在裁切机上利用极耳R角位置定位裁切刀,在模切机和分切机上通过极耳R角找到极耳区域并测量极耳宽高。随着产品生产速度不断提高,企业对锂电池极耳R角的定位精度要求也相应提高。传统的图像处理方法存在对复杂背景下的锂电池极耳R角定位精
学位