【摘 要】
:
图像修复是计算机图形学领域的一个热门课题。传统的图像修复方法基于图像本身的冗余性,根据图像中缺损周边的像素和区域信息进行推理并逐步向内修复,修复结果存在边界模糊及填充纹理不自然的问题。人脸图像有别于一般自然场景,人脸结构固定,脸部器官对称且具有唯一性。由于人脸图像被遮挡部位的信息并不冗余,传统方法的修复效果不佳。近年来,研究者广泛采用生成对抗网络完成图像修复任务。当前人脸图像修复方法仍有缺陷,比如
论文部分内容阅读
图像修复是计算机图形学领域的一个热门课题。传统的图像修复方法基于图像本身的冗余性,根据图像中缺损周边的像素和区域信息进行推理并逐步向内修复,修复结果存在边界模糊及填充纹理不自然的问题。人脸图像有别于一般自然场景,人脸结构固定,脸部器官对称且具有唯一性。由于人脸图像被遮挡部位的信息并不冗余,传统方法的修复效果不佳。近年来,研究者广泛采用生成对抗网络完成图像修复任务。当前人脸图像修复方法仍有缺陷,比如修复区域图像模糊、肤色有差异、结构错误、存在伪影等。本文针对这些问题,采用生成对抗网络(GAN),提出了两种改进的人脸图像修复方法,并在实验中取得了优于现有方法的修复效果。本文的主要工作内容如下:(1)提出了一种基于U-Net结构的GAN人脸图像修复方法。生成器采用U-Net结构,U-Net强大的多维特征提取能力使该网络可以在模型较小的情况下提取结构固定的人脸语义信息。在生成器中采用门控卷积和扩张卷积替代普通的卷积层,门控卷积使模型能够学习任意形状的遮挡,扩张卷积具有比普通卷积更大的卷积范围,保留了图像的全局信息。在判别器中引入PatchGAN结构并使用谱归一化卷积层,PatchGAN可以提升修复区域的纹理细节,谱归一化能够提升训练的稳定性。提出一种综合了逐像素损失、感知损失、风格损失、平滑损失以及GAN对抗损失的联合损失函数。对抗损失用来区分生成的人脸图像与原始人脸图像,风格损失可以保持恢复的面部区域和未遮挡的面部区域之间的风格一致,平滑损失用来改善棋盘伪影,感知损失用来获取真实纹理,逐像素损失用来使图像保持全局一致。(2)提出了一种基于多尺度编码的两阶段GAN人脸图像修复方法。生成器由粗修复网络和细化修复网络组成。粗修复网络采用多个不同尺寸的卷积核对特征进行编码,提取人脸结构特征,进行初步修复;细化修复网络采用基于绝对值的上下文注意力模块以增强网络中特征的匹配,对人脸图像进行细粒度的修复,生成最终结果。判别器采用同样的谱归一化的PatchGAN判别器,对特征点进行密集判别,并改进了判别器损失函数,提出一种由重构损失、对抗损失以及感知损失构成的联合损失函数,迫使生成器生成更加优质的图像。本文在人脸图像数据集Celeb A和Celeb A-HQ上对上述两种方法进行了充分的实验验证,并与几种经典的人脸图像修复方法进行比较分析,结果表明,以上两种方法的人脸图像修复效果在整体结构和细节纹理上都有明显的提升。本文还对所提方法进行了消融实验研究,结果表明,本文方法的改进工作有效提升了模型的人脸图像修复效果。
其他文献
镁晶板–钢筋混凝土叠合楼板的下层为预制新型耐火材料镁晶板,上层为现浇钢筋混凝土板。为了研究镁晶板–钢筋混凝土叠合楼板在不同荷载比下的耐火性能及耐火等级,对3块叠合楼板试件进行ISO-834标准升温下的受火试验,得到叠合板不同位置的受火时间–温度曲线和受火时间-跨中位移曲线。试验表明,叠合板具有良好的耐火性能,耐火极限可达到1.5 h以上。利用有限元软件ABAQUS分析了试件的耐火性能,通过与试验结
经济管理是市场经济条件下企业资源合理配置的重要途径。文章简单介绍了市场经济条件下企业经济管理的特征,论述了市场经济条件下企业经济管理的意义,并从目标成本管理、互联网+管理、柔性管理等几个方面,对市场经济条件下企业经济管理模式以及优化策略进行进一步探究,希望为市场经济条件下企业经济管理提供一些借鉴。
为了考察受轴向约束的型钢混凝土柱的耐火性能,以荷载比、偏心率和含钢率为参数,开展了7根轴向约束型钢混凝土柱的耐火试验。采用恒载升温模式,研究了火灾下受轴向约束的型钢混凝土柱的温度分布、位移、变形、耐火极限及破坏形态。试验结果表明:荷载比相同时,施加在轴心受压柱顶的竖向荷载大于偏心受压柱。对于轴心受压柱,高温下柱首先缓慢膨胀,然后逐渐压缩破坏;由于轴向约束分担了柱的竖向荷载,压缩变形随时间变化较为缓
<正>强者之间巅峰对决,赢计算题者得天下。浙江省物理选考卷(满分100分)题型分布中,选择题45分(必考部分13个单选题共39分,属于学考要求,较容易;加试部分3个不定项选择题共6分,难度适中);实验题14分(必考部分2个题共10分,一力一电,属于学考要求,较容易;加试部分1个题共4分,难度适中);计算题41分
<正> 一、自然概况:贵阳地区位于贵州省中部.北纬26°11′—26°54′。东经106°28′—107°3′。本地区地处苗岭中段,为长江流域与珠江流域分水岭。按地貌形态特征和地貌类型组合属以山原丘陵盆地为主的黔中地区。地势南北高,中部低,最高峰是北部云雾山,海拔1659米,最低点是南明河下游出境处拐久,海拔872米。本地区属亚热带高原季风湿润性气候。一月均温4.9℃,七月均温24℃,年均温15.
目的:探讨基于新生儿早期预警评分系统(NEWS)构建的改良版新生儿早期预警评分系统在新生儿科的应用效果。方法:选择2020年1月—2021年10月我科收治的172例新生儿为研究对象,回顾性分析其临床资料,根据所采用的预警评分系统不同分为对照组90例和研究组82例。对照组患儿入新生儿科后采用新生儿早期预警评分系统,研究组采用基于新生儿早期预警评分构建的改良版新生儿早期预警评分系统。比较两组患儿疾病相
为了更好地推动初中语文教学改革,发展学生的核心素养能力,促进学生知识的构建和运用,发展学生的思维品质,强化学生的审美鉴赏与创造能力,进一步强化学生的民族文化自信,本文从初中诗歌教学着眼,分析学生核心素养能力的培养现状,并提出有效的策略,意在激发学生的学习兴趣,提升学科素养能力,促进学生全面发展。
互联网金融蓬勃发展,但互联网和金融相结合产生了多种新的金融风险类型。为此,社会各界应有效认知互联网金融的价值,采取合理方式维护金融经济的发展。本文分析新时期下互联网金融经济的风险类型和成因,并提出相应的防范措施,以期促进互联网金融的健康、快速发展。