基于动态点云的三维人脸表情跟踪问题研究

来源 :山东大学 | 被引量 : 0次 | 上传用户:lajiub1987
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于动态点云的三维人脸表情跟踪是计算机图形学领域一个重要的研究问题,也是当前的研究热点。它在计算机动画和游戏、数字影视、虚拟现实、远程网络会议、可视电话、人脸表情识别、辅助教育等领域有着广泛的应用。近年来出现的动态三维数据测量技术使得以视频频率获取动态人脸点云序列成为现实,这些点云序列记录了人脸的表情变化(包括全局的刚体运动和局部的非刚体变形),对点云序列进行跟踪生成拓扑一致的三角网格模型,避免了手工进行人脸建模和表情编辑这一繁琐工作。因此,基于动态点云的三维人脸表情跟踪成为真实感三维人脸表情建模最新的途径和方式之一。基于动态点云的三维人脸表情跟踪研究有三个急需解决的关键问题和难点问题:1)如何减少跟踪过程中的人工干预;2)如何获取人脸逼真的表情细节;3)如何提高处理效率,达到跟踪的实时性。这三个问题解决的好坏将直接影响到该技术在相关领域的实际应用。因此,本文针对这三个关键问题展开分析和讨论,提出新的方法着重改善这三方面的性能,从而使方法能满足实际应用领域的需求。主要工作和创新点如下:1、提出一种新的网格对准目标函数。目标函数中引入法向保持和夹角保持约束条件,减少了跟踪过程中的人工干预,并能保持较好的网格质量。1)法向保持约束条件。法向保持约束条件使得参数化网格对准每一帧点云时无需人工指定特征对应点,减少了跟踪过程中的人工干预;与传统的基于光流的自动跟踪算法相比,基于法向保持的算法更加稳定;法向保持约束条件使得在参数化网格与点云形状相差较大时,也可以得到理想的对准效果,提高了算法的自适应性。2)夹角保持约束条件。该条件可使跟踪得到的一系列参数化网格始终保持较好的质量,避免狭长三角片和很小三角片的出现。2、提出基于拉普拉斯平滑和多尺度网格匹配的三维人脸表情跟踪算法,能很好地再现人脸表情的细节特征。1)细节特征提取。利用拉普拉斯平滑将点云上的皱纹、褶皱等细节特征提取出来单独匹配,可有效解决网格模型对准整个点云时难以准确匹配点云上较尖锐的局部细节变形的缺陷,提高了对准精度;细节特征完全提取自点云,充分利用了点云自身所包含的运动信息,与传统的高真实感跟踪方法相比,避免了手工绘制或单独获取这些细节信息所需的额外花销和代价。2)多尺度网格匹配。低尺度网格用于匹配点云上平滑掉细节特征后的由脸部肌肉运动引起的全局变形,高尺度网格用于匹配从点云上提取出的由局部皮肤变形引起的精细表情细节特征,在跟踪得到表情细微细节的同时,保证了算法的效率。3、提出基于区域变形的三维人脸表情跟踪算法,提高了表情跟踪的效率。将网格模型与每一帧点云对准时,自动对网格模型进行初始区域划分,对每个初始区域,又自动进行子区域分割并对每个子区域计算一个统一的非刚体变换,使各个子区域变形后逼近点云。分区域计算变形可显著减少优化求解变形时涉及的未知量数目,大大提高了运算速度,并节省了存储空间。本文提出了新的用于表情跟踪的网格对准目标函数,基于拉普拉斯平滑和多尺度网格匹配的表情跟踪算法,以及基于区域变形的表情跟踪算法,减少了跟踪中的人工干预、提高了跟踪质量和跟踪速度。在如何利用帧点云间连续性更好地处理质量差的点云输入方面还需要进一步提高。另外,结合并行处理,可进一步提高算法效率。这些都是本工作未来的工作方向。
其他文献
添加大麦代替麦芽生产啤酒,会引起麦汁α-氨基氮含量和发酵度的降低,以及麦汁粘度和β-葡聚糖含量升高等问题。为了解决这些问题,本文首先对麦芽、麦汁与啤酒中戊聚糖含量的测定
公共卫生是关系一个国家和或地区范围内所有人群卫生习惯与健康安全的公共事业,公共卫生相关制度的制订推行以及公共卫生习惯的教化养成,也是国家和地方政府的重要职责,因此,
气候变化已成为人类生存和可持续发展面临的严峻挑战,是国际社会普遍关心的重大全球性问题,应对气候变化能力建设已经成为当今国际社会的第一要务。城市是人类社会人口、财富
干细胞(stem cells, SCs)是指那些处于分化过程之中,具有分裂增殖能力,在一定条件下,能分化产生一种以上功能细胞的原始细胞。肝干细胞(hepatic stem cells, HSCs)是指具有干细
相比于上一代存储器,新一代DDR3SDRAM存储器以其容量、性能和功耗等优点被广泛地应用在数字系统领域,,特别是在片上集成系统(SoC)。本文针对提高DDR3SDRAM控制器带宽利用率的策略
嵌入式开发是当前IT产业界最活跃、近些年来发展最快的一个方向,已吸引了大批IT从业人员进行该方面的研究与创新,也取得了丰硕的成果。其中,最引大家注意的就是对ARM处理器和
在我国,目前服装行业一直保持快速发展局面,是具有较大成长潜力和空间的优势行业,对促进我国经济稳步增长作出了突出奉献,即使在可预见的将来,也仍将发挥着带动宏观经济增长
近年来,食品安全问题引起了世人的广泛关注,成为政府和消费者都普遍关心的一个问题。作为食品安全监督管理制度中的重要一环,食品召回制度必不可少。食品召回是将对消费者有不可
随着电子政务信息化建设的不断深入,政协提案工作管理也急需网络化管理。我市政协提案工作目前虽然开通了政协提案直通车,但是大部分委员仍旧以手写纸质提案为主,当前政协系
当前建筑模板的发展已经进入瓶颈期,而国内相对滞后的建筑模板工程技术已经成为我国建筑行业的一大软肋,同时相当程度的制约着我国建筑业的发展。故大力发展革新建筑模板,已成为