基于生成对抗网络的人脸图像修复方法研究

来源 :哈尔滨理工大学 | 被引量 : 0次 | 上传用户:shiguangli010
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸图像是人们十分重要的身份信息,然而在传输、保存以及后期处理过程中,常常会出现水印遮挡、污损、部分区域缺失等问题,为人们的日常生活带来许多不必要的麻烦。因此,研究如何有效的将残缺人脸图像恢复成原本的模样是非常具有现实意义的。现如今,生成对抗网络在图像修复任务上展现出巨大优势,本文将依托生成对抗网络深入研究人脸图像修复问题。本文受到绘画创作的启发,将人脸图像修复任务解耦成边缘预测和人脸修复两个子任务。本文分析了当前诸多基于生成对抗网络的图像修复算法的局限性,对边缘预测模型和人脸修复模型进行改进,设计了一种基于边缘指导的人脸图像修复模型。本文主要工作以及创新点如下:(1)针对边缘预测网络进行改进。本文分析了边缘预测网络缺少多尺度特征的问题,采用Res2Net作为生成器的特征提取结构,这种多尺度特征的融合有利于改善模型的修复效果。另外,为边缘预测网络加入SENet通道注意力,使网络更专注于重要通道中的信息。(2)针对人脸修复网络进行改进。本文分析了随着网络的加深而出现特征信息丢失的问题,对多层级特征联合的网络进行研究,在人脸修复网络中加入跳跃连接结构,结合浅层编码特征和深层特征。这种联合了高低层次的特征很大程度上保留了图像的纹理信息,有助于生成更加逼真的人脸图像。另外,采用Res2Net作为特征提取结构,为网络增加多尺度特征;在人脸修复模型中加入CBAM注意力,使网络更专注于特征图中的重要信息。本文在Celeb A-HQ人脸数据集上做了大量的对比实验并与其他经典算法进行对比,验证了新的网络结构对于人脸修复的有效性。本文不仅将修复结果进行主观视觉上的比对,还使用多项客观评估指标进行比较。通过多组对比实验可以验证,边缘信息对于指导人脸修复具有显著成效,Res2Net、跳跃连接、SENet和CBAM注意力对于改进模型性能也都发挥了积极作用,使得修复结果得到一定程度的提高。本文设计的人脸修复模型相比于其他相关模型,修复后的图像更接近原图像,因此取得了更佳效果。
其他文献
现如今对于汉字图像处理领域的研究,除了研究如何提高手写汉字的识别准确率外,对于如何判断手写汉字的书写质量也是一大重点。人工评价方法存在评分标准不一致、工作成本高和评分人员个体影响等问题,早已不能满足用户的需求。本文的目的在于研究手写汉字识别和质量评价的相关技术,基于最新的深度学习理论,构建出一个手写汉字质量评价系统。具体工作及成果如下:1.收集样本数据。根据应用场景和模型训练需求,收集并整理手写汉
学位
众所周知,广义系统是一类比正常系统更具广泛形式的动力系统。广义系统能够广泛地应用在实际领域中,例如:经济系统、导航系统、电子网络等,并且在结构上具有复杂性和新颖性等特点,因此,引起了许多学者的研究兴趣。一方面,由于单一的传感器容易受到外部的干扰以及自身的影响,故多传感器信息融合技术应运而生。另一方面,网络环境的变化会导致一些网络诱导现象的发生,它会影响控制系统的性能。因此,发展一些解决网络化广义系
学位
连云港市墟沟小学教育集团的"小·雨·滴"心理体验课程建设以儿童良好的心理品质建设、人格健全发展为核心指向,以课程环境提升、全方位的课程建设、多维服务体系建构、多层面的心理体验活动,建构起儿童心理体验空间,通过学科育人、活动体验、专项指导,使学生在多维度、多层次的心理体验中激活成长动力,激发向上心理,提升心理品质,形成健全人格。
期刊
轻量化神经网络模型的设计及其在边缘端的部署是实现无人装备智能化的关键技术。从构造轻量级深度神经网络的角度出发,研究面向无人装备嵌入式平台应用的智能边缘计算软技术,重点分析模型剪枝、知识蒸馏和参数量化等方法,并以目标识别为例进行各类智能边缘计算技术性能分析,结合各类轻量化模型设计方法的优缺点,提出一种边缘计算的处理框架,即通过模型方法来设计轻量化的神经网络模型,通过引入知识蒸馏的方法对轻量化模型进行
期刊
随着科技与时代的进步发展,智能制造业已成为推进中国制造强国战略的主攻方向之一,也是中国制造业创新发展的重大历史机遇。“十四五”期间,我国将全面深入推进智能制造,这使得制造行业迎来全新的转折点。广大优秀学者们为替代不适应当今制造行业的传统生产方式,在生产以产品定制化、个性化和小批量的产品时,将加工与装配一同处理的问题上进行了深入研究。针对以往动态多产品综合调度没有充分考虑产品所需加工用时和产品加工次
学位
随着生活水平的提高,新能源汽车已成为人们日常一部分,人们对新能源汽车要求也愈发增加,消费者从价格、质量、能耗等多方面进行考量,加之进入新能源汽车市场的企业增多,物料价格和生产成本上涨,导致市场竞争日益激烈。在此大环境下,企业愈发重视通过对生产装配线优化来提高整体效率,增强企业市场竞争力。BQ公司是一家新能源汽车制造公司,为改善装配线存在的问题,使装配效率达到最优,本文以工业工程理论方法为基础,找出
学位
随着近现代物理学中量子理论、流体力学、理论力学得快速发展了推动了对数学理论快速发展,而泛函分析方向正是一个解决物理问题的高效数学工具。是一门将分析理论、与几何方法以及代数理论框架综合整理起来的一门数学学科,目的是为了解决诸多领域中的难题。其中Banach空间几何又是泛函分析方向的一个重要的分支,并且具有很多重要应用,如不动点理论、微积分、连续介质力学、变分学、逼近论、量子信息、数学物理方法、量子信
学位
特征选择方法作为降低数据维度的方法之一,广泛的应用于模式识别和机器学习中。特征选择方法因其能够帮助人们找到特征和数据之间的关联性。因此,研究人员将特征选择方法应用在很多场景中,如文本识别、图像处理、图像分类等场景。对于特征选择问题,如何设计有效的选择准则并构造相应的约束形式是影响特征选择模型性能的主要因素。此外,由于传输、存储等过程引入的数据噪声,也使得现有特征选择方法在性能保持和应用局限性等面临
学位
为消除路网局部短板和弱项,优化完善路网结构和布局,推动路网整体效能提升,实现铁路高质量发展,首先对“十三五”以来铁路网发展现状进行了总结和分析,并基于现场调查、统计分析、定量分析法等,对路网能力不平衡、不适应问题进行了剖析;其次,探讨了铁路强网补链的基本含义、主要分类及需遵循的技术原则以及重要意义和作用;最后,建议在采取优化运输组织措施的基础上,分别从客运、货运两个方面分类提出路网留白区域新线联网
期刊
数据规模近年来增长迅猛,信息安全的地位日渐凸显,流密码作为一种保密性良好、加解密速度快、常用于国防军事等安全性需求较高的领域的加密体制,发挥着重要作用。为了做好信息安全基础设施服务的保障,流密码算法的实现载体要在灵活性、性能和安全性等指标之间进行权衡,可重构密码处理器可以在保证一定处理速度的前提下同时满足一个信息安全解决方案对多种密码算法的需求,而且安全性也是有保障的。本文面向流密码算法设计了一种
学位