基于深度学习的单图人脸三维形状重建技术与应用

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:csss2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维人脸是一种不易受环境因素影响且具有准确人脸姿态以及空间信息的人脸表示形式。三维人脸数据需要通过RGB-D相机或高精度扫描仪获取。由于专业设备成本昂贵,导致三维人脸数据并不能同二维人脸图像一样通过日常的摄像头采集得到,因此基于单幅图像的三维人脸重建技术成为计算机视觉领域热门的研究课题。三维人脸重建技术的发展对于人脸识别、人脸关键点检测以及活体检测等应用具有重要的现实意义。本文的主要研究内容如下:提出了一个基于双路编解码网络的三维人脸形状重建算法。目前基于三维形变模型改进的深度学习方法无法有效地将表情属性与身份属性分解,导致重建后的三维人脸表情差别不明显。针对这一问题,本文在使用全局人脸学习个体特征之外,提出使用与表情变化相关的局部人脸学习表情特征,从而在有效地实现三维人脸形状重建的同时,加强人脸表情的呈现效果。提出了一个基于半监督迁移学习的三维人脸形状重建算法。由于不同三维扫描设备获取的三维点云在维度与排列方面存在差异,导致深度网络模型无法从中学习到有效信息。针对这一问题,本文将三维点云转换成适合卷积神经网络学习的深度图形式,从而在数据形式上拉近不同三维人脸域之间的差距。随后将合成的三维人脸数据集作为源域,将真实的三维人脸数据集作为目标域,通过图像级对齐和特征级对齐实现基于迁移学习的三维人脸形状重建;并使用半监督学习规范重建结果,提高三维人脸深度图的重建精度。提出了一个从大规模单图人脸三维重建数据中学习的跨域三维人脸识别算法。不同于二维人脸图像可以从网上获取,三维人脸数据的私密性以及较大的采集难度使得基于深度学习的三维人脸识别技术的发展遇到了瓶颈。针对这一问题,本文先使用合成的三维人脸数据集训练三维人脸识别模型。随后,本文结合实际应用场景从无源域数据域适配的角度出发,利用伪标签自动筛选和优化实现从合成的三维人脸源域到真实的三维人脸目标域的模型迁移,实现高准确率的三维人脸识别。
其他文献
锡基负极材料具有较高的理论比容量、适中的嵌-脱锂电位和低廉的价格,是最具前景的锂离子电池高性能负极材料之一。同时,锡基负极也是最早实现商用的非碳负极材料。2005年,Sony公司推出了以非晶Sn-Co-C三元合金为负极的“Nexelion”电池,其较同型号石墨负极锂离子电池体积比容量提升了30%,但300次循环后的容量保持率仅为60%。此外,近年来,市场对高能量密度和高安全性的锂离子电池的需求越来
细菌等微生物在设备的表面生长、富集并形成生物垢,这严重影响了海洋工业、生物医疗、电子设备以及其他领域的发展。目前,使用含杀生剂的防污材料是最有效、经济的方法,但随人们环保意识的提升和严格环保法规的实施,研制环保、高效的防污材料刻不容缓。有机硅防污涂层是一种环保材料,以其优异的污损脱附能力受到了青睐。但有机硅材料本身污损阻抗能力弱,而且其力学性能差,容易在服役过程中遭受破坏。在本论文中,针对传统有机
锻造复合材料模压法是碳纤维零部件的新型快速成型技术,具有工艺简单、成型效率高、可制造复杂形状等优势。预浸带的高效切断是锻造复合材料模压成型法的关键,但是预浸带短切加工对象同时含有脆性高硬质碳纤维和粘性环氧树脂基体。刀具-碳纤维间的切削力场、刀具-环氧树脂间的流场、刀具-碳纤维间摩擦产生的温度场等多场协同作用下,切削环境变得更加复杂。因此,为解决碳纤维切割过程中的切割力大、磨损快等问题,本文提出织构
心理压力在现代社会越来越普遍,而且对人们的生活和心理健康的影响越来越大,需要及时地发现和调整。因此,压力检测具有重要的研究意义。传统的基于生理信号的压力检测方法依赖于设备对生理信号的采集,应用场景受限。近年来随着生活中越来越多的无接触摄像机的部署和数据收集分析技术的进步,基于图像的压力检测方法得以发展,但应用部署时仍然存在以下几个问题:人工提取面部特征和使用较浅层的机器学习算法无法充分提取压力相关
城市地下空间的开发利用和商业建筑公共空间的兴起,推动了下沉广场在商业建筑中的应用。商业建筑下沉广场有效利用城市地下空间,起到联系周围空间的节点作用,有利于实现地面建筑、地下交通和地下商业的融合设计,作为商业区人员户外活动的场所,面临着高温和辐射带来的热舒适问题,特别是在湿热地区,营造舒适的物理环境,能够改善人们的购物体验,为商业建筑带来附加的经济效益。然而,目前关于商业建筑下沉广场微气候的研究较为
随着数字经济的蓬勃发展,人们越来越多地使用图像作为记录生活和传递信息的载体。色彩作为图像的重要属性之一,可以让图像的呈现更为真实和生动,给人们带来丰富多彩的感知和体验。图像着色是为灰度图像自动生成颜色的技术,在动画制作、旧照片修复、可视化增强等方面有着广泛的应用,一直是计算机视觉领域的研究热点。无参考的图像着色作为一种典型的病态任务,具有明显歧义性,然而现今大多数研究方法都只能生成单一的着色结果,
膜分离技术具有耗能少、效率高等优点。由石墨烯层层堆叠形成的石墨烯膜具有丰富的二维纳米孔道,传质性能优异,且力学性能优秀、化学性能稳定,在海水淡化、水处理等领域均有广阔的前景。在纳米孔道传质研究方面,分子模拟可从微观角度观察离子、分子的运动,提供独特的深入见解。本论文使用分子动力学模拟研究石墨烯二维纳米孔道中离子输运机制,为石墨烯或其他材料的二维纳米孔道膜(二维膜)的设计提供理论指导,推动石墨烯二维
近年来,下沉式地铁车辆段这一新型结构形式在我国城市地铁工程中出现,较好的解决了车辆段土地资源综合高效开发利用问题。但是由于通风需要,下沉式车辆段内大量通风设备24小时不间断运行产生了较严重的设备噪声,加上列车运行噪声与车间维修噪声,使车辆段员工持续暴露在不良的声环境之下,研究下沉式车辆段内的环境噪声特性与传播规律及其噪声控制方法具有现实的迫切性和必要性。本文依托广州地铁14号线石湖下沉式车辆段工程
随着科学技术和信息技术的迅猛发展,传统制造业面临着巨大的压力。中国虽然是制造业大国,但是自动化、信息化、自主创新能力与发达国家之间仍然存在差距。在工业4.0的大背景下,中国制造2025战略的实施意在结合新技术提升国内制造业的智能化水平。数字孪生作为工业4.0的要素之一,有助于实现制造过程中的物理空间和信息空间之间的互联互通,推动智能制造的发展。在成形小批量特定曲率的船板情况下,一些传统的冲压成形方
可穿戴电子产品可以随时监测人体健康,受到人们越来越多的关注。由于纺织品的柔软性、舒适性和便携性,将纺织品转化为电子产品的研究日益增多。如果想要将电子纺织品投入市场使用,其寿命将是最重要的考虑因素。所有的电子纺织品在其使用周期内会遭到各种因素的破坏,而洗涤过程是最具破坏力的,将其用于智能服装时导电组分的脱落使得导电性能下降,进而检测信号不稳定,因此亟需解决电子纺织品的耐洗性和稳定性。导电组分的导电性