人脸识别算法和相关技术研究一直是计算机视觉和模式识别领域的研究热点之一。在漫长的研究历程中,基于二维图像的人脸识别算法和理论已经取得了较大的进展,并提出了许多成熟的算法。但是理论和实验研究表明,二维图像中人脸姿态或成像时的光照等条件变化对算法的识别性能有很大影响,同一人在不同姿态或不同光照条件下图像的类间距远大于不同人在相同姿态或光照条件下图像的类间距。二维人脸图像对姿态、光照和表情等因素的敏感性,极大影响了二维人脸识别算法的识别性能。随着计算机硬件和三维数据获取技术的发展,物体三维数据的采集变得越来越方便、可行。与二维人脸图像相比,三维人脸数据包含了人脸空间结构信息,是人脸固有的本质属性,而且对外界条件变化有很好的鲁棒性。因此,近年来越来越多的研究人员致力于三维人脸识别算法和辅助三维信息的二维人脸识别算法的研究,并且取得了一定的成果。本文在总结和深入研究当前三维人脸识别算法和三维人脸模型的基础上,探讨了基于三维特征的人脸识别相关技术,重点解决了三维人脸的鲁棒性表征和识别问题,并针对二维人脸识别算法在某些特定情况的局限性,提出了相应的解决方案。本文的主要研究工作包括以下几个方面:1.基于几何特征的三维人脸识别三维人脸信息量丰富,特征类型较多,各种特征对人脸的表征能力不同,如何提取简单、有效的特征对人脸进行表征,是人脸识别需要解决的首要问题。本文在研究三维人脸数据采集和归一化方法基础上,对三维人脸特征的表征和度量方式展开深入研究,提取了5种三维人脸几何特征,并通过实验分析各种特征的表征能力和判别能力。由于单一特征对人脸描述具有片面性,而且所含判别信息有限,所以,本文采用线性加权策略融合5种几何特征进行人脸识别,一定程度上提升了三维人脸识别效率。2.基于局部二值模式(LBP)的三维人脸识别三维人脸对于姿态和光照变化有较强的鲁棒性,但受表情影响较大,人脸表情变化使得三维人脸网格发生一定程度的扭曲和变形。为削弱表情对三维人脸网格数据的影响,提取表情鲁棒的三维人脸特征,本文研究了基于LBP的三维人脸识别算法。深入分析了三维LBP算子的定义方式、三维人脸曲面的分割方案和基于统计直方图的人脸曲面匹配算法,将LBP算法成功扩展到三维人脸识别领域,提高了三维人脸识别算法对人脸表情的鲁棒性。3.基于稀疏表示的三维人脸识别针对大量三维人脸低维几何特征,如何挑选对分类有效的特征进行人脸表示,本文重点研究了三维人脸低维几何特征的提取与排序挑选策略。在此基础上,提出三维人脸的稀疏表示方法,并对人脸特征(信号)的稀疏性进行评估,进一步提高了三维人脸表征的准确性,和三维人脸识别算法对人脸表情的鲁棒性。4.辅助三维特征的HaarLBP人脸识别鉴于二维人脸识别算法对人脸图像的光照、姿态等因素比较敏感,而三维人脸特征在一定程度上对上述因素具有鲁棒性。因此,本文在对二维人脸识别算法和三维人脸特征鲁棒性的深入研究基础上,提出了融合二维HaarLBP特征和三维几何特征的人脸识别方法。首先,为了提取更多的人脸图像细节信息,研究并提出了基于HaarLBP的二维人脸表征和度量方式;然后,针对二维人脸图像表征能力不足的问题,通过对基于形变模型的三维人脸重建方法和三维人脸特征鲁棒性的研究,提出了融合二维三维信息的人脸识别算法,一定程度上提高了人脸识别算法对人脸表情、姿态和光照等因素的鲁棒性。5.基于单一视图姿态不变的人脸识别基于单视图的人脸识别问题,由于训练集中每个人只有1组训练样本,因此,无法从有限的训练集中提取足够的判别信息进行人脸分类识别。针对训练样本不足的问题,本文借助基于形变模型的三维人脸重建方法,重构输入样本的虚拟三维人脸,然后通过模型旋转、投影等方法丰富样本库,获取特定人大量多姿态的人脸图像;在此基础上,构建特定人的人脸姿态子空间,并提取姿态不变的人脸共性特征用于人脸表征和识别。该方法有效解决了多姿态人脸识别算法对人脸多姿态样本的需求,以及人脸姿态鲁棒特征的提取与表示问题。