人脸图像渐进高倍深度超分辨率方法

来源 :中南民族大学 | 被引量 : 0次 | 上传用户:yecao126128
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸图像超分辨率旨在通过数值计算的方法,对获取的低分辨率、低质量人脸图像进行分辨率增强,从而有效改进人脸图像的视觉质量及其辨识性,在基于监控视频的人脸识别等领域具有重要应用价值。由于人脸图像具有高度结构化和特有的身份属性,人脸超分辨率如何恢复出含有精细细节且身份保留的人脸图像是极具挑战性的课题。近年来,基于深度学习的人脸超分辨率方法引起了极大关注,相对于传统方法展现了明显优势。为了补偿图像降质过程中丢失的高频面部信息,许多方法引入面部先验信息辅助高分辨率图像重建以获得大的性能提升。然而,采用面部先验的人脸超分辨率方法仍存在以下问题:1)多数方法直接从低分辨率、低质量的人脸图像或粗糙的人脸图像中预测先验信息,难以估计出准确的先验信息;2)面部先验信息估计和图像特征恢复通常被作为多任务学习问题在一个尺度因子上进行优化,当进行高倍放大时,面部组件的结构变化不能被完全捕捉和利用;3)许多方法仅在网络末端通过转置卷积或亚像素卷积层提升图像分辨率,这不仅会导致严重的混叠伪影,而且增加了训练难度。针对以上问题,本文首先围绕基于解析先验指导的高倍人脸超分辨率算法展开研究,通过利用渐进式重构策略和注意力机制以期望有效提取面部先验知识从而指导细节重建。此外,为进一步利用面部先验信息,结合反馈机制,研究了多阶特征循环增强的渐进高倍人脸超分辨率方法,改进深度超分辨率网络的重构图像质量。具体工作如下:1)提出了一种基于解析先验融合的渐进高倍人脸超分辨率方法。该方法在模型设计和网络训练上都引入渐进式思想。通过逐步执行2×上采样操作,在不同分辨率图像特征中预测先验信息并将其与对应分辨率图像特征融合,充分利用了面部先验信息,更好保存了面部组件结构。渐进式训练方法通过逐级向模型添加新的层,使网络训练难度大大降低,更稳定恢复出高质量面部图像。实验结果表明,提出的方法相较于现有超分辨率前沿算法,在CelebAMask-HQ和Helen数据集上的PSNR值分别提升0.57dB和0.4259dB,MS-SSIM值分别提升0.0044和0.0078。2)提出了一种多阶特征循环增强的渐进高倍人脸超分辨率方法。该方法在研究内容1的基础上,采用渐进式重构策略将人脸解析先验信息嵌入到不同分辨率的图像特征中,并结合反馈机制,将不同分辨率的图像特征通过反馈连接传递到下一次迭代并对当前输入进行调制,有效传递了高频信息流,更好保存了高频细节信息。相较于现有同类方法,提出方法在CelebAMask-HQ数据集上的PSNR值提升了0.3491dB。综上所述,本文在基于面部先验的人脸图像超分辨率重建算法基础上,针对如何有效预测先验知识、如何充分融合先验信息两个方面,提出了基于解析先验融合的渐进高倍人脸超分辨率方法和多阶特征循环增强的渐进高倍人脸超分辨率方法,为面向监控与手机相机场景的低质量人脸图像超分辨率重建提供了新的有效方案。
其他文献
安徽省铜陵市牡东农业专业合作社在2020年夏汛后合理安排茬口,灾后及时补改种四季豆,精选2个四季豆品种进行地膜栽培、合理肥水,补(改)种的10 hm2四季豆,产量高达320 t多,不仅将农民因灾造成的损失减到最小,还填补蔬菜伏缺、丰富市民的菜篮子,充实了菜农的钱袋子,也给周边农户带来了可观的经济收益。
期刊
小麦替代玉米作为能量饲料在家禽饲养中已有较多应用,然而由于小麦含有非淀粉多糖(简称NSP),使小麦具有一定的抗营养特性。在饲粮中添加NSP酶可以一定程度的降解小麦NSP,从而降低抗营养作用,且添加复合酶的效果优于单酶。目前NSP复合酶大部分是以复配形式生产,首先需生产多种单一酶,生产较复杂。利用酵母表面展示体系可将各种酶展示表达在酵母细胞的表面作为全细胞催化剂,具有固定化酶的特性,制备简单且易于回
学位
肺络是络脉系统的一个分支,也是经络系统的重要组成部分。笔者通过查阅古代文献,结合现代研究发现,肺络包括循行于体表的肺经之阳络和联络本脏的肺脏之阴络。肺经之阳络位置表浅,主要联络机体表里内外,肺脏之阴络位置较深,对肺发挥其生理功能起着至关重要的作用,两者密不可分,相辅相成,临床研究大多是针对在表的肺经之阳络,而对于在里的肺脏之阴络却少有研究。并通过对查阅的文献进行分析、整理,重点从肺络的概念、组成、
期刊
透明导电薄膜作为一种性能优异的光电子半导体材料,已经得到了深入的研究和广泛的应用。在众多的透明导电薄膜材料中,氧化铟锡(ITO)因其光电特性尤为突出而深受科研人员的喜爱,但由于元素铟在自然界的存储量比较缺乏、成本高昂和有毒性等多种原因限制了ITO薄膜更广泛的应用,而掺杂氧化锌(ZnO)薄膜不仅原料易得、价格低廉、无毒无污染,同时还表现出了优良的光电、压电等性能,因而具备替代ITO薄膜的巨大潜力。目
学位
视觉目标跟踪是计算机视觉领域一个重要研究方向,在自动驾驶、视频监控、人机交互、医疗诊断等众多领域有着广泛的应用。经过多年发展,视觉目标跟踪技术取得了巨大进展。然而受目标外观和光照变化、背景干扰、遮挡等因素影响,实时有效的视觉目标跟踪仍然面临很大的挑战。随着深度学习的崛起,基于神经网络的视觉目标跟踪已成为主流研究方向,其中基于双胞胎(Siamese)网络模型的方法在目标跟踪领域表现出了优异的性能。这
学位
随着物联网、人工智能、大数据和云计算等新兴技术的发展和应用,对移动通信数据传输的高速率和可靠性需求日渐增长,因此全球主要国家均在积极推进第五代(5thGeneration,5G)以及后5G无线通信系统的研发。毫米波(millimeter wave,mm Wave)因其具有较高的无线传输带宽、小型化的大规模天线阵列以及较高的天线增益等特性,成为5G移动通信的关键候选技术之一。毫米波通信采用的波束成形
学位
随着国内自闭症儿童数量的急剧增长,关于他们如何康复治疗等相关社会问题得到了人们广泛关注。有研究表明,自闭症患儿的康复与环境息息相关,环境的好坏直接关系到患儿的健康成长。然而,目前国内关于自闭症儿童康复中心并未进行系统研究,患儿的康复环境也未得到足够的关注。因此,自闭症儿童康复空间设计研究显得尤为重要。文章以自闭症儿童康复中心室内空间环境为研究对象,以理论研究和设计实践相结合的方式展开,强调环境对患
期刊
激光雷达是集光、机、电、算的精密复杂系统,凭借其探测区域广、空间分辨率高、探测精度高等优点被广泛应用于大气探测研究中。气象环境的好坏直接影响着激光雷达运行效率和探测数据质量,并且遭遇突发恶劣天气下时会严重损坏激光雷达系统精密仪器。因此,目前激光雷达台站大多采用由值守人员结合天气气象预报、卫星云图等来判断当前气象是否适合激光雷达的运行需求,并且在激光雷达运行过程中,需专人值守防止恶劣天气对激光雷达仪
学位
根据中高层大气探测激光雷达台站的现状,研发了一套智能化的激光雷达综合控制软件系统。该系统将激光雷达的天窗、水冷机、激光器、光电倍增管等部件有机地组合在一起,严格按照激光雷达的操作规范实现了自动化控制;并在运行过程中实时监测气象条件和激光雷达各部件的运行状况,如遇突发异常,按规范进行应急处理;该系统既能通过实验室内的计算机操作终端实现整体系统的操作与监控,又能通过手机端实现远程的操作与监控。具体工作
学位
作为一种高效信道编码,LDPC码(Low Density Parity Check Code)具有良好的纠错性能,其置信传播(BP)译码具有低复杂度优点,在通信领域得到了广泛应用。但是,在其Tanner图中,存在陷阱集问题,导致BP译码算法在译码过程中的性能曲线在高信噪比的区域出现平台状现象,即称为错误平台(error floor)现象,这一现象的出现使其在低误码率存储等领域中的应用受到限制。本文
学位