基于单视图的三维人脸精细化重建算法研究

来源 :武汉理工大学 | 被引量 : 0次 | 上传用户:jinr0op4
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人脸作为人类的标志性特征,包含着极为丰富的个人信息,在医疗美容、影视娱乐和信息安防等领域都有着十分广泛的应用,随着近几年人工智能和深度学习的不断发展,三维人脸重建技术开始成为计算机视觉和图像处理领域中的重要研究课题。人脸的三维结构不局限于单一的人脸姿态和光照环境,能更好的描述特征信息,可操作性更强。虽然三维人脸重建技术在近几年得到了较大的发展,但是仍然存在许多限制因素约束着这一领域的发展。一方面,虽然使用复杂硬件设备能够完成高精度高真实感的三维人脸重建,但是硬件设备的使用场景限制较大、成本造价高、处理复杂不灵活,导致无法在实际应用中得到普及;另一方面,基于图像的三维人脸重建技术多数对输入图像的质量和数量要求较高,并且三维模拟效果不稳定。针对现有方法的不足,论文将从单视图图像转换、几何空间重建及面部细节重建三个方面,对精细化三维人脸重建展开研究,主要研究工作如下:(1)提出了一种基于生成式对抗网络的多损失图像转换方法(Multi-Loss Image Conversion Method based on GAN,MLICM-GAN)。该方法利用生成式对抗网络的图像生成能力,将二维人脸照片转化为人脸深度图和对应点的稠密映射图。为了更好的捕捉人脸信息,在训练生成器网络时使用改进的U-Net框架以及一个联合损失函数,使转换出来的图像具有更好的深度信息和边缘信息。实验结果表明,该方法能够有效的将输入二维人脸图像转换为深度图与稠密映射图。(2)为了将人脸图像从二维空间转换到三维空间,提出了一种改进的基于嵌入空间形变模型的三维人脸重建算法(Mixed Data Fitting and Improved Regular,MDF-IR)。该方法首先将人脸深度图转换为三角网格,然后基于该网格对模板人脸采用一种改进的非刚性配准算法。在迭代变形的过程中,采用混合数据拟合项以及改进的正则化项共同构成能量函数,进而得到包含面部表情以及褶皱凸起等面部五官粗细节的三维人脸平滑面部结构。实验结果表明,该方法基本还原了人脸的五官特征和面部表情的复现,纹理的映射完整。(3)为了得到更加精细化的三维人脸模型,在研究工作(2)的基础上设计了一种基于低通滤波的精细化三维人脸重建算法(Modified Normal Vector and Average Curvature for Detail Filling,MNVAC-DF)。该方法基于图像的低通滤波,将模型顶点沿着法向量方向发生位移,进而将承载着面部细节纹理的高频分量叠加到平滑人脸上,在更加细致的层面上完成皱纹等面部细节的重建。实验结果表明,该算法能够有效的对人脸的面部高频纹理进行恢复。与同类方法相比,该算法重建出的三维人脸模型与输入的人脸更加接近,不仅还原了图像拍摄的角度,对面部的纹理细节也做到了更加精细化的恢复。
其他文献
聚磷酸铵(APP)是一种新型的性能优良的无卤环保膨胀型阻燃剂,由于其具有化学稳定性好、吸湿性小、比重小、毒性低等优点,近年来被广泛用于各方面的防火处理;因为受其结构限制
惩罚也是教育的一种手段。无论是育人者,还是被教育者,没有人喜欢惩罚,但教育又似乎离不开惩罚。读过早年魏书生的有关班级管理的书,我们会由衷地佩服他的惩罚之道。通常,他
激光器是谐振式光纤陀螺(RFOG)的重要组成部分,其光学噪声严重地限制了RFOG的输出精度。通过建立激光器偏振特性的数学模型,分析了激光器的偏振消光比、对轴误差和偏振本征态
针对MGK1312×250型数控轧辊磨床在磨削凸度轧辊时出现不对称现象,导致凸度轧辊有明显的台阶,主要分析了磨削φ16mm的轧辊产生台阶的原因,认为是反向间隙导致轧辊磨削出现
介绍了真空热处理炉恒温区的测量原理、测量步骤及测量过程中需要注意的事项,恒温区的均匀性,是保证热处理工艺需求、保证热处理产品品质、提高生产率的重要保障。
门式起重机的主梁作为主要承载构件对整机的自重影响非常大,在满足应力要求的条件下怎样通过改变主梁箱体与隔板、加劲板的布置形式来减少截面面积,进而减轻自重。笔者以一台
1.1以党的十六届五中全会精神和中央经济工作会议精神为指导,落实科学发展观,建立电力需求侧管理工作的长效发展机制和常态运行机制.维护电网安全稳定经济运行,促进国民经济持续快
根据全国老龄办统计,2020年全国60岁以上老年人口将达到2.55亿,占全国总人口17.8%;2050年前后将会达到顶峰4.87亿,占全国总人口34.9%。中国老龄化进程加速发展,然而中国家庭结构及养老观念发生重大变化,未富先老、未备先老问题凸显,传统养老方式不能完全满足老年人多样化、个性化的养老需求。“互联网+”时代的到来为养老问题提供新思路新模式,各地纷纷探索实践智慧养老,将现代信息技术引入养
糖蛋白是一种在生物体内种类繁多,分布广泛,具有多种生物活性的生物大分子。研究表明,糖蛋白中糖链的存在不仅在维持蛋白质结构稳定、防止蛋白质水解、调节免疫力等方面作用
糖尿病视网膜病变和年龄相关性黄斑变性等常见眼科疾病的进展多呈不可逆性,严重者可致失明。早发现早干预,是减少因病致盲病例的主要手段。已有研究表明:病变引起眼底血管的异常,要早于组织结构的改变。因此,通过监测眼底血管系统,可实现对疾病的早发现。眼底荧光血管造影术和吲哚青绿血管造影术是眼科疾病诊断的金标准,但二者需注射造影剂,可能会引起不良反应,且需要较长准备时间。近年发展起来的光学相干层析血管成像术(