三维人脸重建及其在头部姿态估计中的应用

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:wenxiaoyao1214
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
头部姿态估计是计算机视觉的热点研究方向之一,并在人机交互、学习者行为分析等领域有着广泛的应用。虽然已经很多方法在实验数据集上报告了良好的结果,然而这些方法在实际应用时性能却急剧下降。究其原因:大部分头部姿态估计算法采用有监督学习方式训练,对数据集的头部姿态客观标注过于依赖;然而,由于标注困难,现有数据集的头部姿态标注存在较大误差。为规避头部姿态估计方法对数据集标注的依赖,本文研究了人脸三维重建和基于三维模型与二维图像特征点匹配的头部姿态估计方法。主要内容和贡献如下:1)提出了一种基于形变模型和深度学习的人脸重建方法。构建了一个“形状+表情”的人脸几何混合模型,提出了针对人脸特征点的损失,用于训练网络自动从人脸图像回归人脸参数,最终能生成带有表情的个性化人脸几何模型。本文提出利用编码-解码结构,直接从图像中重建得到人脸纹理的UV贴图,进而将纹理UV贴图映射到几何模型上,完成三维人脸重建。我们提出结合生成对抗网络的生成作用,让整个结构进行自监督训练,进一步完善人脸整体细节。本方法在AFLW2000-3D数据集上取得了0.0413的纹理重建误差,三维人脸对齐精度提升了2.8%,平均重建时间仅为27.5ms。2)提出了一种基于三维人脸模型和二维图像特征点匹配的头部姿态估计算法。在研究内容1)中重建得到三维人脸的基础上,提取模型中三维人脸特征点,再用特征点检测器从图像上检测二维人脸特征点。据此,本文构建了三维人脸特征点与二维人脸特征点间的空间映射模型,进而得到关于特征点匹配的无约束非线性优化问题。本文提出了一种包含二阶段求解的迭代优化算法来求解该优化问题,并计算得到头部姿态。本方法在在Pointing’04和Pandora上分别取得了4.78°和5.06°的最低平均绝对误差,在五个数据集上综合平均误差不超过6°,误差标准差小于1。本文提出了一种重建具有个性化几何形状和真实纹理的三维人脸模型的方法,与现有方法相比,纹理重建质量高,三维人脸对齐精度高,平均重建耗时27.5ms。在重建人脸模型的基础上,本文提出了一种头部姿态估计方法,并将本方法和其他当前最先进方法,在五个被广泛使用的公共数据集上进行了丰富的实验对比和分析,结果表明,本方法在单个数据集上都能取得稳定且良好的实验结果,在跨数据集实验中平均误差不超过6°,误差标准差不超过1,鲁棒性更强。
其他文献
近年来,随着人工智能话题被广泛讨论,深度学习技术逐渐成为了当下互联网时代的研究热点。在计算机视觉领域,往往更偏向于使用深度学习技术来解决语义分割、图像分类以及人体姿态识别等问题,相较于传统算法,其优势在于可通过大量样本自主学习特征来达到目标要求。本文主要研究微小型接线柱上绕线匝数的视觉计数问题。现代工业中零件尺寸越来越小,质量要求越来越高。为了保证整个零件功能的完整性,必须在绕线完成之后进行绕线计
学位
容迟网络(delay tolerant network,DTN)是一种不存在稳定端到端链路的新型网络,由于这种网络具有网络拓扑结构动态变化、传输时延高以及资源有限等特点,节点的移动无法预测,消息在源节点与目的节点之间的传递很少存在直达的链路。因此,在容迟网络中节点之间采取“存储-携带-转发”的消息传输机制,携带消息的源节点利用中继节点作为通信媒介,最终将消息转发到目的节点,完成整个消息的传输。容迟
学位
在大型物理实验装置中包含多种探测器,将探测器的输出进行数字化采集并根据数据分析粒子的信息是物理实验的重要环节。量能器主要用于测量粒子的能量,输出通常表现为脉冲信号的形式,在脉冲信号中提取时间与幅度信息是粒子分析重要的一步。脉冲特征提取有很多方式,如曲线拟合、种群技术等。随着探测器实验数据量的不断增加,探测器环境中往往包含随机噪声、长期漂移、短期改变等影响。传统的数字化处理方式在消除探测器环境中噪声
学位
在技术飞速发展的当下,舰船上设备间的数据传递更加繁多、复杂,作为舰船上各种系统信息传输的基础平台,舰船网络所承担的数据交换和信息共享需求与日俱增。由于舰船上的设备种类多种多样、不同的设备产生的数据格式也不尽相同,直接进行舰船网络设计需要耗费大量财力物力,因此需要行之有效的验证工具,模拟出多种数据流来对舰船网络的信息交互进行研究。本文提出了舰船网络仿真模拟系统的方案,建立仿真环境得到舰船网络的性能指
学位
近年来,随着教育信息化的快速发展,推进了数字教育资源的共建共享,缩小了城乡间的教育资源差距。但是,由于互联网信息规模大,数据杂乱且无序,碎片化严重,而教科书仅有知识框架,也不足以为学生提供完整的、全面的知识内容体系。知识图谱的出现为教师和学生提供详细的学科知识体系和清晰的知识组织关系,有助于提高学生的学习效率,对于教师的备课上课也具有指导意义。指代是指在下文采用简称或代词来代替上文已经出现的某一词
学位
随着科学技术的不断发展,越来越多的用户在网上分享自己的观点。社交网站和购物网站上隐藏着大量的用户情感信息。如何从这些海量数据中挖掘出有效的信息并加以利用已成为研究的热点。文本情感分析就是对文本中深层次的情感信息进行探索和分析,通过一定的方式找到文本中的有效信息并加以利用。然而,现有的情感分析模型无法有效的提取文本深层次的情感信息,并且缺乏提取文本内重要信息的能力,为了进一步提高情感分析的水平,针对
学位
“一带一路”是“丝绸之路经济带”和“21世纪海上丝绸之路”的简称,以政策沟通、设施联通、贸易畅通、资金融通、民心相通为主要内容加强沿线国家之间合作。语言互通是实现“一带一路”互联互通的重要方面。加强语言能力研究,提升语言能力是“一带一路”建设中非常重要、紧迫的研究任务。但是在目前的高新技术词语推广方面,如:支付宝、清洁能源的光伏发电、北斗卫星导航等特色的词语,教师很难用语言将每个知识点都解释的非常
学位
党的十九大报告中明确指出,要深刻挖掘中华优秀传统文化,并结合时代要求继承创新,让中华文化展现出永久魅力和时代风采。荆楚文化被认为是华夏民族文化的一个重要组成部分,在我国古代文明的发展历程中具有举足轻重的地位,是湖北的“中国形象”和“世界名片”,是传播“一带一路”中华文化的重要组成部分。在荆楚文化中,尤以中华历史楚国文物漆器作为代表,其造型之精美、纹饰之绚丽,可谓漆器史上的一次飞跃,尤其是其表面装饰
学位
情感在人类交往过程中有着不可替代的作用,面部表情是人表达情感最直接最常用的方式。面部表情分析是人脸识别技术中不可或缺的重要研究内容,研究的是如何高效准确地捕捉和分析面部表情及其传递的信息。面部表情分析使用表情的类别和强度两个属性全面地分析人的情绪状态,在新型人机情感交互等领域有着巨大的研究价值和广阔的应用前景。在目前的面部表情分析研究中,大量工作主要集中在识别面部表情类别,而很少有对表情强度的研究
学位
DDoS攻击是一种比较常见的网络攻击方式,其技术原理并不复杂,但是造成的危害非常大。因此,实现DDoS攻击的精确检测并采取有效的防范措施是非常重要的步骤。然而,现有的研究工作仍然存在不足,主要体现在主流研究工作采用有监督学习算法来进行DDoS攻击检测,这对新形式的DDoS攻击的检测效果并不理想。针对上述不足,本文研究了无监督学习算法在DDoS攻击检测中的应用,旨在提高DDoS攻击检测的准确率。本文
学位