高保真三维人脸重建算法的研究与实现

来源 :宁夏大学 | 被引量 : 0次 | 上传用户:dongmeizi1988
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度学习是目前应用最广泛的人工智能技术。近年来,许多研究已经将深度学习的概念引入到基于视觉输入来重建、跟踪和分析人脸的任务中。其中,高保真三维人脸重建任务旨在从图像中建模一个真实的三维人脸,这在相关的计算机视觉领域中起着重要的作用。使用监督深度学习技术进行高保真三维人脸重建通常是一项对数据规模和质量要求都很高的任务,因为监督学习的训练过程需要大量带标签的数据,而在实际情况中,收集和注释此类数据的成本非常高昂。因此,在高保真三维人脸重建任务中,自监督的深度学习技术更具普适性。现有的基于自监督的高保真三维人脸重建方法可以重建出较为准确的面部纹理细节,但这些方法在重建面部的皱纹细节时会出现细节丢失的情况。本文针对此情况分别提出了两种解决方法,相比于现有方法,本文的方法在重建面部的皱纹细节时保持了较高的重建精准度。具体地,首先,本文提出了孪生UNet,其通过边缘信息与面部细节信息的互相指导来提取更精确的面部细节。其次,本文提出了递归图像到图像转换网络,其通过模拟生物视觉来显式地增强面部细节的特征信息。两个方法都是以自监督的形式进行学习。此外,本文设计了一个高保真三维人脸重建系统,对上述的方法进行了展示,用户可使用该系统体验高保真三维人脸重建的过程。综上所述,本文的主要贡献点如下:1.本文提出了一种新的孪生UNet用于高保真三维人脸重建。孪生UNet将位移深度图视为二值分割图,并通过关联两个独立的UNet来同时优化位移深度图和边缘图的多层次特征。根据逻辑相互关系,本文设计了两个与方向特定的集成操作,并在两个任务之间双向传递消息。2.本文提出了递归图像到图像转换网络,该网络结合了递归机制和图像到图像转换网络,以密集的反馈连接进行多重序列化处理。其将解码器学习到的不同层的特征映射聚合到每一层编码器中,为编码器层提供了有益的扰动,因此能够显著增强层之间的特征信息流动。3.本文搭建了一个高保真三维人脸重建的展示系统。用户可以通过该系统对自己感兴趣的人脸图片进行测试,将一张人脸图片传入该系统即可返回由高保真三维人脸重建算法生成的3D人脸模型。
其他文献
随着科学技术的飞速发展,学者们所研究的被控系统的结构越来越复杂、规模越来越庞大,传统的确定性系统的控制理论已趋于完善.近年来,含有噪声或不确定性的随机模型是当前控制领域的研究热点之一.噪声的存在改变原系统的动力学特征,降低了系统的控制性能,甚至破坏系统的稳定性.因此随机系统的稳定性研究具有重要的理论意义和实际需要.此外,时滞、外部干扰、不确定性在实际系统中广泛存在,这些元素的存在往往会影响系统的稳
学位
随着医学成像技术和计算机技术的不断发展,计算机辅助诊断逐渐成为临床上辅助医生的主要工具。近年来,全球脑肿瘤病人持续增加,产生大量MRI图像,使得影像科医生不得不高负荷工作。因此,迫切需要精准的脑肿瘤图像自动分割技术辅助医生工作。基于深度学习的方法已经快速发展为医学图像分割领域的研究热点,它可以在医疗图像大数据分析中自动学习隐含的疾病特性信息。脑肿瘤图像具有语义简单、三维结构等特点。而深度学习中的V
学位
知识图谱是现代人工智能的核心基础设施,随着人工智能的迅速发展,各种知识图谱被构建出来。与此同时,由于存在着难以去除的噪声与错误等不确定因素,使得知识表达难以完备化,知识图谱中出现了不确定信息。传统的知识图谱表示学习方法不能满足不确定知识图谱的表示及应用需求。因此,带有不确定信息的知识表示学习成为一项紧迫又富有挑战的任务。论文从不确定性知识图谱表示学习模型入手,通过对不确定知识图谱表示学习模型中的得
学位
随着遥感卫星技术的发展,遥感影像空间分辨率可达亚米级。与中低空间分辨率卫星影像相比,高空间分辨率卫星影像具有更丰富的空间细节信息,能够精细呈现出地物的颜色、形状、边缘等。基于像素级或目标级的遥感影像解译方法不能有效提取遥感影像的高层语义信息,场景分类方法能够建模并解译以语义目标构成下复杂空间分布的高层语义信息,可解决遥感影像解译中的“语义鸿沟”问题。目前场景分类方法主要是基于深度学习技术,通过数据
学位
水稻是我国重要的粮食作物,其产量一直受到病害的制约,对水稻病害的类型进行快速、准确的识别尤为重要。传统的识别以肉眼观察为主,具有一定的主观性,且需要深入到稻田实地观察,耗时、耗力,不能满足水稻病害识别实时性的需求。近年来,深度学习技术发展迅速,如何将深度学习应用于农作物病害识别领域已经成为了 一个研究热点。本文以目标检测算法为基础,从实际的水稻病害检测的需要出发,引入深度学习技术和方法开展研究。针
学位
社交媒体网络的崛起,使得交流可以跨越时空和地域,但也加快了谣言在社交网络中的传播,容易引发社会信任危机。因此,研究社交网络下的谣言检测方法,是净化社交网络空间的重要举措,对于解决现实社会问题具有理论价值和实践意义。相比传统的线下谣言,谣言在社交网络上传播会包含更多的附加信息,如用户特征信息、内容特征信息、评论信息等。社交网络谣言特征维度丰富(如用户特征、内容特征、传播特征等),是社交网络谣言检测的
学位
随着基础建设行业的快速发展,工程车的需求量逐年增加。由于发动机电控单元(Engine Electronic Control Unit,EECU)长期处于震荡剧烈、高温及电磁干扰等恶劣工作环境中,导致其故障频发。激励信号是保障EECU正常启动和运行的关键,其具有种类繁多、特征复杂的特性,从而导致其识别困难,降低了 EECU故障诊断效率。由于曲轴、凸轮轴所产生的激励信号特征最为复杂多样并且在电控系统中
学位
目前,分布式光伏电站发展迅速,装机量已超过集中式光伏电站,这对电网提前制定计划提出了更高的挑战。准确的中长期发电量预测不仅能为电网提前制定相应计划提供决策支持,也能为未装机地区提供参考,同时对电网的稳定、有效运行至关重要。与短期发电量预测相比,中长期发电量预测难度更大。首先,中长期时间跨度大,需大量数据作为支撑;其次,实际数据中电站特征和气象特征较少且相关性较低;最后,分布式光伏电站中长期发电量预
学位
目标检测是计算机视觉领域的一个重要研究内容,引起国内外学者的广泛关注。一阶段检测器因其比两阶段检测器具有更高的效率和更低的部署成本而在目标检测领域具有较高的研究意义。在实际应用中,影响一阶段目标检测器性能的主要原因是特征不平衡和类别不平衡。特征金字塔中高层和低层特征信息具有不一致性,且在特征融合过程中会出现信息衰减和通道衰减问题;softmax损失函数善于优化类间距离,但优化类内距离能力比较弱,不
学位
唐卡作为我国的非物质文化遗产,记载了藏民族的历史、医学等题材,具有独一无二的历史研究价值。然而,受到自然或者人为因素的影响,唐卡在保护上受到了多方面威胁,因此尚且现存的唐卡亟待去保护。由于唐卡图像存在破损形状不规则、缺失面积较大等问题,传统的图像修复算法难以对唐卡进行理想的修复。随着深度学习技术在数字图像处理领域的快速发展与应用,这为唐卡图像修复带来了新方法,结合深度学习的图像修复算法可以充分挖掘
学位