基于GAN的人脸盲超分辨率的研究与实现

来源 :武汉邮电科学研究院 | 被引量 : 0次 | 上传用户:gsxs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸超分辨率是计算机视觉的一个热点研究方向,目前多数算法仅针对双三次降采样或其他高斯模糊技术生成的人工低分辨率图片进行超分。但真实场景下采集到的人脸图像往往受到噪声、模糊、低分辨率等复杂降质因素的干扰,这导致传统的人脸超分具有较低的鲁棒性,无法满足现实需要。因此对真实场景下的人脸图片进行盲超分具有重要的现实意义。针对这一问题,常见的人脸盲超分算法分为有监督和无监督两种技术方向。其中基于有监督的算法往往通过引入先验知识来生成人脸,该算法生成的图片质量较高,但存在先验知识质量不佳和鲁棒性较低的缺点。无监督算法具有广泛的适用性和较高的鲁棒性,但其训练不稳定导致可行解空间过大,最终造成生成的图片质量较差。本文针对上述两种思路各自的难点分别提出两种算法,具体研究内容如下:(1)提出一种基于生成性人脸先验的人脸盲超分算法GPLFSR。该算法将强大的人脸生成网络Style GAN2作为先验知识引入到人脸盲超分过程中。在现有GLEAN网络的编码器-潜在库-解码器结构的基础上引入了一种更精细的先验特征结合方法,即信道压缩激励空间特征变换(SE-SFT)层。通过SE-SFT层使网络可以更好地利用预训练网络中的先验信息,使网络在增加鲁棒性的同时在超分结果的真实性和保真度之间取保持平衡。此外,为了提高网络性能,本文引入了身份一致性损失。实验结果表明,该方法在16×放大因子下的感知指标和视觉效果优于现有的人脸超分方法。(2)提出一种基于降质变分自编码器(DAE)来引导Cycle GAN实现人脸盲超分辨率的算法DAE-Cycle GAN。本章提出用变分自编码器来学习真实场景的图片降质过程,并基于Cycle GAN设计整体架构来进行无监督循环训练。这使得降质网络DAE可以从真实低质量图片中学习到噪声和降质模型并生成与高清图片对应的真实低质量图片,而超分网络则可基于成对的图片进行训练。该算法由于并未用到人脸的先验信息,所以网络也适用于传统图像的超分。实验表明,提出的网络在无监督训练的前提下可取得与有监督网络相当的人眼感官和更好的数值指标,且本网络在真实场景下具有更强的鲁棒性。
其他文献
弱胶结软岩自身承载能力较低,存在胶结性差、强度低、遇水易软化等特点,巷道顶板围岩及锚索孔淋水冲刷加剧了巷道顶板变形下沉,威胁巷道的安全稳定。因此,将锚注支护技术与弱胶结软岩顶板淋水巷道相结合,研究该类巷道围岩控制技术具有一定的现实意义。以杨家村煤矿5-1上煤层1#探巷淋水顶板为研究对象,采用现场调研、室内试验以及钻孔窥视等方法分析弱胶结软岩巷道顶板变形破坏特征及原因,原始创新提出普通锚索封孔注浆技
学位
地震、火灾等灾害事件的发生给我国经济发展和人民的生产生活带来较大的危害,灾害事件发生后,如何快速高效的开展搜救工作一直是各国急需解决的问题,利用同步定位与建图(Simultaneous localization and Mapping,SLAM)以及针对目标点的路径规划技术可有效提高搜救机器人的自动化程度,进一步增强搜救机器人在未知环境中的搜救能力。本文针对基于三维激光雷达的轮式搜救机器人建图及导
学位
煤壁片帮引起的冲击气流、刮板运输机运动及其对粉尘的反弹作用都会产生大量的粉尘,造成工作面的粉尘污染且严重影响井下的作业环境、损害工人健康、降低工作效率。本文以中煤集团塔山煤矿综采面为研究对象,采取理论分析和数值模拟相结合的研究方法,对冲击气流和粉尘的运移规律进行研究,分析影响冲击气流和粉尘浓度的一系列相关因素。论文的研究内容和主要结论包括以下几点:(1)研究了采面粉尘产生机理及其影响因素并根据守恒
学位
矿质元素钙、锌是植物生长发育过程中的必需元素,在各种生理生化过程中起重要作用。为了研究钙、锌对核桃硬壳发育以及果实品质的影响,本试验以‘温185’和‘新新2号’核桃品种为试材,对核桃叶面喷施不同浓度的螯合钙、螯合锌溶液。主要研究结果如下:1、喷施螯合钙、螯合锌对核桃木质素合成的影响研究结果表明,稀释1500倍液的螯合钙明显促进‘温185’核桃内果皮中的纤维素合成,而锌起抑制作用,在硬核末期(6月2
学位
我国矿井瓦斯地质条件复杂多样,因而不同矿区的瓦斯赋存千差万别,陕西韩城矿区北部为煤与瓦斯事故突出重灾区,特别在瓦斯富集的煤层软分层区域容易发生瓦斯事故,而矿区南部象山矿虽未发生煤与瓦斯突出事故,但其生产遭受着矿井瓦斯的严重制约。准确掌握象山矿的瓦斯解吸特性及瓦斯赋存规律,是矿井针对性瓦斯治理的重要指导,是保障矿井安全并高效生产的关键性问题。本文采集了象山矿3#、5#煤层软硬分层煤样,通过实验室实验
学位
为了准确识别用户意图并帮助用户快速找到目标信息,需要在尽可能完整地表达目标信息全部涵义的前提下使用有限个数的标签对短文本进行分类。中文短文本通常表现出长度短、表述不规范和内容多样等特点,使用传统的文本单标签分类算法无法对其进行有效分类,因此针对中文短文本的多标签分类算法一直是学者们的重点研究方向。本文在现有文本多标签方法的基础之上,针对文本表示方法和特征提取策略进行改进,提出一种基于多维度特征融合
学位
为了探究旱地苹果园长效实用的水肥保持方法,在延安市黄土塬上的果园中探究不同保水处理对土壤含水量、土壤养分含量、树体生长发育及果实品质的影响。结果表明:埋砖和施用保水剂均能减缓深层土壤含水量的下降趋势;埋砖叠加保水剂处理可提高土壤N、P和K养分含量,单一保水处理可提高土壤P、K的养分含量;各处理均能提高叶片SPAD值和叶片含水量;各处理均可增加苹果单果重和单株产量;保水剂处理和埋砖叠加保水剂处理更能
期刊
文章在全面总结剖析国内外种业创新发展现状与趋势的基础上,对山东省种业创新发展情况进行了系统梳理,针对山东省当前种业创新发展存在的主要问题与迫切需求,提出了种业创新的主要目标、技术路线和相关对策建议,以期为山东省乃至全国各省市种业创新发展提供积极借鉴。
期刊
煤层瓦斯含量的准确测定对矿井瓦斯的防治具有重要意义,而直接法测定煤层瓦斯含量测定过程中损失瓦斯量得精准计算至关重要,目前损失瓦斯量补偿计算模型较多,且各煤层瓦斯解吸规律也各不相同,导致各损失瓦斯量补偿计算模型在使用时计算结果产生的误差较大,造成瓦斯含量测定值偏差较大。为此,为提高平煤六矿煤层瓦斯含量测定的准确性,在戊8、戊9-10、丁5-6煤层现场采取代表煤样,进行0.5MPa、1.0MPa、1.
学位
随着我国煤炭开采的深度和规模不断增加,煤矿灾害发生的频率也随之增高,造成的危害也更大。煤矿生产安全事关国家能源供应的稳定和工人的人生安全,所以对矿井各种灾害预测方法的研究具有重大的意义。人们对各类预测煤矿灾害的方法展开了深入的研究与分析,其中电阻率法也被用来预测煤矿灾害的发生。电阻率法能够通过利用地壳内各种岩石之间导电性的不同,凭借探寻和揭露地下人工建立的稳定电流场的分布规律,来探测断层破碎带、调
学位