基于视频序列的人脸活体检测

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:sjty2j
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文讨论人脸活体检测算法,它是现代人脸识别系统(如网上银行,网上购物等)的重要组成部分。尽管许多机构都对这个问题进行了研究,但是人脸活体检测算法的准确性和鲁棒性依然有待提升。因为人脸攻击的光照、场景、拍摄设备等条件多种多样,而现有公开数据集因数据采集困难,样本单一,所以大多数算法极其容易过拟合。本文基于视频序列前后帧之间的单应性关系对人脸活体算法进行分析,有效提高了算法的鲁棒性。主要工作成果体现在以下几个方面:首先,鉴于传统的人为设计的特征(如Optical Flow,LBP,HOG等)在进行人脸活体检测时的性能有限,本文提出以视频序列之间的单应性关系为依据对视频进行分类。本文根据对“真”、“假”人脸视频的观察,发现了在“假”脸视频中,帧与帧之间的大部分区域相对运动为刚体平面的平动和转动,即有单应性关系;而在“真”脸视频中,帧与帧之间的所有区域的相对运动为一个立体人脸的运动,没有单应性关系。本文所提出的单应性特征和传统的特征相比更能反映出“真”脸和“假”脸视频的本质区别。本研究利用单应性参数提出的特征在多个数据集上体现出较强的准确率和鲁棒性,尤其是在不同数据集的交叉验证中取得了很好的结果,模型体现出很好的泛化能力。其次,本文讨论了单应性参数和运动特征提取的方法。在单应性的区域中,帧与帧之间的变换可以通过一个单应性变换矩阵,将其中一帧变换为另外一帧。本文设计了利用空间转换网络(STN)提取两帧之间的单应性变换矩阵,再通过变换矩阵的参数,结合图片提取运动特征的方法。最后,本文提出了一种将多实例学习(MIL)算法应用于图片的多个子区域(Patch)的新颖框架。经过总结发现,“真”脸视频中所有的Patch都是非单应性的,而“假”脸视频中部分Patch具有很强的单应性。因为在“假”脸视频中,帧与帧之间的相对运动可以分解为一个摄像机和拍摄平面的相对运动分量(单应性分量)和视频中人脸移动的分量(非单应性分量)。受到非单应性分量的干扰,重拍人脸视频中,部分Patch在帧与帧之间并不表现出明显的单应性。由于具体哪些Patch具有单应性未知,我们引用了多实例学习算法找出视频中具有单应性的Patch。综上所述,本文对人脸活体检测算法进行了广泛的讨论,并对其中的关键问题进行了深入的研究。针对传统特征模型泛化能力的局限性,本文原创性的提出了基于单应性分析的新颖算法,并探讨了提取单应性特征的具体方法。同时,将多实例框架引入到人脸活体检测中,提高了模型的召回率。基于大量理论分析和实验结果,本文提出的一系列方法稳定且具有较强的泛化能力,显著提升了人脸活体检测算法性能。
其他文献
国家统计局最新数据显示,目前我国小微企业的进出口贸易额总量已经超过了所有大中企业的贸易额的总和。众多的小微企业已然成为了我国国际贸易的主要力量,也为整个国家的经济发展做出突出的贡献。伴随网络技术的发展,电子信息技术的进步,经济全球化的不断深入,跨境电商成为一种新型的商业模式,在进出口贸易中所占的比重越来越大,受到了学者和社会各界的广泛关注。据2019年5月商务部的《中国电子商务报告(2018)》中
英语写作作为英语教学的重要组成部分,对学生英语综合能力的发展起着重要作用,尤其对初次接触英语写作的初中生来说,培养一种有效的英语写作方法对其提升英语能力至关重要。然而,通过阅读相关文献了解到,初中生在英语写作过程中存在不感兴趣、态度不积极,缺乏修改意识,缺少有效写作训练等问题。基于此,笔者在实习学校初二年级某班开展过程写作方法训练的行动研究,通过确认问题,聚焦过程写作法,旨在改变写作态度、培养写作
本研究基于生态化学计量学理论,运用空间代替时间的方法,以贵州省关岭—贞丰花江喀斯特高原峡谷石漠化生态系统不同等级石漠化环境(无石漠化、潜在石漠化、轻度石漠化、中度
在2006年,联想手机以一款粉时尚的代表作——联想i807打动了不少的年轻消费者.而现在.联想又再接再厉推出了i807的后续产品——联想i817。联想i817延续了i807简洁.时尚的数码科技
立体显示技术给观众带来了全新的视觉体验,有力促进了立体产品的推广与普及。舒适立体显示是立体成像技术发展的最终目标,观看立体内容时出现的视觉不舒适现象,是阻碍立体技
为了更加合理、有效地利用海流测速数据,必须进行误差分解和校正。通过分析相控阵声学多普勒海流剖面仪(PAADCP)测试海流流速的原理,提出了海试数据粗差区别与动态校正的算法
2017年9月统编本教科书在全国范围内推广使用,直到目前,初中三个年级的六本教材已全部投入使用。在教材更换的背景下,广大师生需要加强对新教材的了解。文章选取统编本教科书中古诗词的助读系统为研究对象,以理论和实践相结合的方法,探究统编本初中语文教科书古诗词助读系统的编写特点和使用现状,并提出一些使用建议。以期为统编本教科书古诗词助读系统的合理使用提供教学策略。全文由四个章节组成。第一章对统编本初中语
随着信息技术在教育领域的不断发展,同时为幼儿教学带来了一场机遇和挑战,幼儿教育机构也在积极地尝试教育技术与幼儿课程整合的应用与探究。根据幼儿身心发展的特点,信息技
本文简单介绍了高层建筑基础施工的施工前准备工作、沉桩方法选择。
当前,我国的经济市场规模不断扩大,发展革新速度持续提升,网络技术与经济领域相互整合,已经成为我国经济发展的主要方向。在这一背景下,跨境电子商务逐渐形成,并且成为推动国