基于深度学习的人脸图像重建技术研究

被引量 : 0次 | 上传用户:xiaohan521325
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机视觉技术的发展,人脸图像已广泛应用于社会安全、文化娱乐、社交媒体等非配合场景中。然而,非配合场景中采集到的人脸图像常常面临遮挡、模糊等问题,需要进一步优化重建。目前,基于深度学习的人脸图像重建技术有了实质性的发展和突破,能够解决人脸图像重建中的特征损失和细节模糊等问题。本文分析了人脸图像重建研究中的现状和不足,重点围绕遮挡人脸图像重建、多姿态人脸图像重建和模糊人脸超分辨率图像重建三个方面开展技术研究。论文主要的工作和创新点如下:(1)针对遮挡人脸图像重建的补丁边缘模糊以及重建前后纹理特征不一致的问题,研究提出了一种双平行向量表示方法LPGAN,通过平行向量的拟合作用将重建补丁进行三维空间映射。LPGAN将平面无法分类的像素点进行特征空间映射,使其能够正确分类,并通过添加全连接层来加强人脸的特征,在全局重建与局部重建相结合的方法下,由粗到细地重建人脸图像。在数据集AFLW的测试结果中,LPGAN对遮挡人脸的修复中,特征相似度平均提高了35%。实验结果表明LPGAN有效改善了遮挡人脸补丁模糊的问题,显著提升了人脸的特征相似度。(2)针对多姿态人脸图像重建中人脸纹理过于光滑,人脸重建前后表情和姿势拟合程度低,人脸图像重建效果受模型的风格限制问题,研究提出了一种基于人脸等高线估计的多姿态人脸图像重建网络CRNet。该网络利用人脸的形状特征来标记像素点的空间位置信息,再通过自监督学习不断反馈优化人脸关键点位置信息来提高人脸图像表情和姿态的特征拟合。在对不同姿态和角度下的标准化平均误差(NME)测试中,CRNet在数据集AFLW2000-3D中的平均NME比3DDFA减少1.96%,在数据集AFLW-LFPA中的平均NME比De FA减少1.07%。在NME测试中,与VRN和3DDFA相比CRNet的效果更好,有效地保留了二维人脸图像的纹理和风格特征。(3)针对模糊人脸超分辨率图像重建中,重建后的人脸图像姿态特征不一致、模型收敛困难问题,研究构建了一种基于生成对抗网络的人脸超分辨率重建模型FRGAN。该模型通过人脸姿态估计网络将标准人脸图像与模糊人脸图像进行关键点定位和特征提取,指导条件下的标准人脸图像通过姿态转换网络将其与模糊人脸图像姿势相统一;在生成对抗网络模型基础上加入预判监督器,通过人脸姿态特征和纹理特征的预判来加快模型收敛。在AFLW数据集中,FRGAN比PFSR的峰值信噪比平均超出0.5。实验结果表明,FRGAN在峰值信噪比和图像结构相似性指数测试中整体表现优于Bicubic、SR-GAN、3DFGAN,这表明其生成的人脸特征纹理更清晰。
其他文献
本文基于In VEST模型,选取中街山列岛及其周围邻近海域为研究区域,分别评价了其陆地生态系统服务和海洋生态系统服务,其中,陆地生态系统服务价值是对比了2017年至2020年研究区的水源涵养、水质净化和碳存储三项服务。海洋生态系统服务主要是以曼氏无针乌贼的三种不同生境场景为例,结合内梅罗指数法分析了海洋水质、水产养殖和景观视觉质量三项服务价值变化。同时利用能值理论对海岛生态系统服务进行综合分析。研
学位
目的 观察不同剂量右美托咪定对术后导尿管相关膀胱刺激征(CRBD)的影响,探讨右美托咪定与术后膀胱刺激征症状的量效关系,为临床选择适宜剂量提供依据。方法 选取择期全麻手术计划导尿的男性患者303例,分为生理盐水对照组(A组)、右美托咪定0.2μg/(kg·h)组(B组)、0.4μg/(kg·h)组(C组)和0.6μg/(kg·h)组(D组)。B、C、D组均在诱导前输注负荷剂量右美托咪定1μg/kg
期刊
<正>导尿管相关膀胱刺激征(catheter-related bladder discomfort, CRBD) 是指由置入导尿管诱发膀胱逼尿肌不稳定,从而引起的膀胱过度活动症状,即逼尿肌在储尿期出现的不自主性收缩使膀胱内压增加≥15 cmH2O,从而出现尿频、尿急和耻骨上区不适感等临床症状[1-2]。CRBD是接受围手术期膀胱导尿术的患者在麻醉苏醒后的常见主诉,发生率为47%~90%[1-2],
期刊
本文在科技人才评价改革试点工作开展背景下,结合国家创新驱动发展战略需求导向对科技人才进行分类评价研究。通过面向高校、科研院所和企业科技领域专家学者开展深度调查和访谈,确定以“创新价值、能力、贡献为导向”的评价指标,利用层次分析法(AHP)分析测算各级评价指标的权重,构建创新驱动发展战略下科技人才分类评价指标体系,为完善科技人才评价体制机制提供理论支撑,并提出健全以目标、结果为导向的人才评价机制,明
期刊
随着我国远洋渔业不断发展,金枪鱼的产量也在快速的增加。金枪鱼的口感优良,味道鲜美,深受市场消费者的喜爱。由于金枪鱼的保鲜对温度要求十分苛刻,不仅要求温度保持在零下六十度,同时在速冻过程中对温度变化也是十分的敏感。因此目前金枪鱼的加工方式大多数是以罐头的形式保存。在另一方面,现代制造业不断升级、迭代,高速压力机慢慢进入金枪鱼罐头盒的加工过程中。相比较于高速压力机在金枪鱼罐头盒加工过程中的应用,送料机
学位
振动共振是指在高频信号和低频信号的激励下,非线性系统在低频信号频率处的响应幅值随着调节高频信号的幅值或频率而放大的现象.研究振动共振现象不仅可以增强携带有用信息的微弱信号,还可以检测未知的低频信号,因此振动共振广泛应用在物理学、工程学、生物学等领域.本文以含有时间延迟和分数阶微分的多稳系统为研究模型,将系统的响应幅值增益作为衡量振动共振现象的指标,根据快慢变量分离法得到系统在低频处响应幅值的解析表
学位
从二十世纪80年代开始概率教学在全球范围内兴起,很多国家开始将统计和概率的初步知识作为数学基本知识的一部分引入中小学。而中国相对起步较晚,于《义务教育数学课程标准(2001年版)》中提出将概率相关知识引入中小学教育。在中国的传统文化中,田忌赛马故事开博弈论的先河,背后有概率的影子,而成语“万无一失”比喻“有绝对的把握”则是对“小概率事件”的一种认识,概率与我们的日常生活紧密联系,但关于概率的教与学
学位
氢燃料电池因其能量转换效率高、零污染以及良好的稳定性等特点,被认为给传统的交通运输行业所造成的能源危机及环境污染等问题,提供了可期的技术解决方案,其中质子交换膜燃料电池(Polymer Electrolyte Membrane Fuel Cell,PEMFC)作为一种清洁、高效的发电装置得到快速地发展及推广应用,被认为是不可再生能源的最佳替代品之一。而环境振动对PEMFC的影响则被相关文献认为是不
学位
有趣的双节律现象广泛地出现在众多领域中,但双节律行为对各种系统的影响有利又有弊.研究自激励双节律系统的分岔有助于控制系统的动力学行为,进而可以在相关的实际应用中发挥重要的作用.双节律振子还非常适合对生物系统进行建模,尤其适用于脑电波模型中具有铁电行为的酶底物反应.因为真实的自然系统不可避免地会受到噪声的影响,所以可假设系统的内外电场和极化相互作用产生的影响包含随机扰动.另外,由于生化反应总存在一定
学位
灰霉病是一种由灰葡萄孢(Botrytis cinerea)引起发生在番茄(Solanum lycopersicum)上的常见病害,可导致番茄严重减产。防治番茄灰霉病的传统方法为化学防治,即使用农药。农药的大量使用会不可避免地造成土壤水源污染以及病原菌抗药性累积,利用具有生防功能的微生物替代传统的农药去进行病害防治,不仅具有与传统化学防治方法相当的防治效果,还不会对人类的身体健康造成负面影响,并且有
学位