基于单张图像的真实感三维人脸重建

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:DreamerL
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于单张图像的三维人脸重建经常在大姿态和不平衡光照中表现较差,为了解决这些问题,本文提出了一种新的解决方式来重建出具有完整真实纹理的三维人脸模型,这个方法不仅在重建人脸几何方面取得了非常好的效果,而且完成了恢复出完整真实纹理的任务。本文所提出的方法分为人脸几何重建和纹理补全两部分。在前一部分中,我们提出了一种端到端的方法,能够直接从二维图像中重建出三维人脸几何结构。算法的核心部分为设计的UV位置图,它在UV空间中记录了完整的人脸形状,然后训练一个简单的卷积神经网络从单张人脸图像中回归得到UV位置图。这个重建方法不依赖于任何人脸模型就可以得到完整的人脸几何以及对应的语义信息。同时,该方法的网络非常轻量级,只需9.8毫秒即可处理一张图像。在多个具有挑战性的测试数据集上进行的实验表明,本文方法在人脸几何重建方面的性能相比于其他方法提升了超过25%的性能。在后一部分中,首先用平均外观替换光照外观以减轻训练数据集的多样性,然后用生成性对抗网络完成缺失部分的纹理生成。使用可见纹理的信息和对抗生成网络的高生成能力有助于增强纹理补全的稳健性。实验表明,我们的方法在不同光照下的人脸图像上都表现良好。最后,这两个部分得到的结果不仅对人脸姿态和环境光照具有鲁棒性,而且还保留了输入人脸的身份信息,可用于人脸交换,动画制作和人脸识别等应用中。
其他文献
十余年来中国的华侨华人史的研究,所涉及的范围相当广泛,主要集中在如下7个方面: (一)关于华侨出国史 1.移民史的分期。华侨史的分期有一个划分标准各遵不一的问题,如:以中国
铁路速度的提高使噪声问题越发突出,造成旅客的乘车舒适度降低,并给铁路沿线的居民带来很大影响.文章通过对噪声的分析,提出了降低噪声的方法.
随着新能源技术的发展,直流微电网因其易于接入新能源发电而越来越受重视。而因新能源发电具有地域性且不同直流负荷所需电压等级往往不同,直流微电网的发展必定会朝拓扑复杂
2008年全球金融危机爆发后,对传统的货币政策提出了挑战,社会各界认为必须对宏观金融风险进行调控,学术界开始重新审视原有的货币政策传导机制,宏观审慎政策逐渐进入学者和市
S8-QY-(容量1+容量2)/110三相V/V接线系列牵引变压器是郑州铁路局机务处、原郑州铁路局西安勘测设计院以及长沙顺特变压器厂针对既有牵引变压器的弱点与不足,从利于牵引变电所经济
本文采用相互作用玻色子模型研究了对形状相变比较敏感的可观测量的有限N特征,从中选出哪些量可以作为有效序参量,并将其与实验值比较,借此,从形状相变的角度判断几条同位素
快者生存面对瞬息万变的市场,面对虎视眈眈的对手,企业能否快速反应已成为决定其成败乃至生死存亡的一个关键因素.
目的:本文旨在从静脉给药治疗的溶媒和药物两个方面的因素探究静脉药物治疗与其所致的血压波动和静脉炎这两种常见的不良反应的关系,为临床静脉用药的合理和安全提供依据。方
1概述通常拖动重载负荷的多为大型绕线式异步电动机,在水泥生产中尤为如此,而这些电机起动时,一般在转子回路中要串接附加的可变电阻装置,从而获得所要求的起动特性.