基于特征绑定的人脸检测及应用

来源 :南京大学 | 被引量 : 0次 | 上传用户:frog_t
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近十年来,人机交互技术得到了迅速的发展。特别是自2010年以来,各种人机交互系统已经逐步融入到人们的日常生活之中。人机交互技术可以分为接触式人机交互技术和非接触式人机交互技术。前者需要借助一定的辅助设备,通过物理传感器进行人机交互;而后者不需要借助任何辅助设备,用户可以在未经特殊训练的情况下完成远距离的人机交互,使得用户在使用时更自然、更方便、更舒适。因此,非接触式人机交互技术具有更广泛的应用前景,成为人机交互领域的研究热点。  人脸检测及定位是非接触式人机交互中的重要问题。截至目前,国内外多家科研机构和公司都展开了对人脸检测算法的研究。高效的人脸检测方法需要快速地检测出摄像装置视场范围内任何可能出现用户的位置,并能够实时进行响应,同时,人脸检测需要对环境光变化、人脸偏转、部分人脸遮挡、用户佩戴眼镜、用户手势不标准等复杂环境具有良好的适应性。因此,对检测的准确性、实时性、鲁棒性都具有较高要求。  本文提出基于特征绑定的人脸检测方法。根据生物视觉感知领域中已有的特征绑定理论,本文在机器视觉模式识别领域中提出特征绑定的方法,并将其应用于人脸检测。同时,本文提出曲波变换去除图像块效应的算法,并提出以人脸检测为基础的手形提取方法。对于待检测图像,首先进行预处理,包括去除低像素图像中存在的块效应、肤色信息提取、深度信息提取等,然后对图像进行人脸检测,再根据人脸检测的结果对用户手部进行定位,并跟踪记录手部运动轨迹及进行手势识别。针对人脸偏转、部分人脸遮挡、用户佩戴眼镜等可能对检测算法引发干扰的情况,本文所述方法能较大程度消除影响,提高整个检测系统的鲁棒性。  本文所述人脸检测方法中使用的具体方法如下:  (1)提出利用曲波变换对存在块效应的低分辨率图像进行复原的算法。由于曲波系数与图像的块效应之间存在一一对应的关系,因此对曲波系数进行自适应处理,从而消除图像中存在的块效应,恢复图像中更多细节信息。  (2)提出模式识别领域中的特征绑定方法。根据视觉感知领域中的特征绑定理论,在模式识别领域中提出特征绑定方法,并建立数学模型。特别是针对存在部分遮挡的目标,证明特征绑定的有效性。  (3)使用基于不同特征的特征绑定方法进行人脸检测和定位。通过机器学习寻找适用于人脸检测的特征,本文使用Haar特征及ASM特征。将训练得到的特征根据一定准则进行分组,并将每一组包含的所有特征绑定为一个整体对子目标进行检测。最后通过每个子目标的检测结果判定人脸是否存在。由于并不需要直接检测到完整的人脸,因此该方法对人脸偏转、部分人脸遮挡、用户佩戴眼镜等情况有较高的准确性和鲁棒性。同时验证了特征绑定在不同类型特征上的应用。  (4)提出基于人脸检测的手形检测方法。以人脸检测为基础,结合肤色检测及深度检测,在特征层面上进行多信息融合,完成利用双目立体图像提取手形,并跟踪动态手势轨迹。  (5)使用隐马尔可夫模型(HMM)对动态手势进行识别。针对每一种动态手势,训练一种对应的HMM模型。检测过程中,计算待测手势相对于每一种HMM模型的概率,选取最优概率对应的HMM模型并解码后得到相应响应。同时,隐马尔科夫模型具有极好的可扩展性,后期增加新的手势时只需训练新的HMM模型,而无需对整个系统进行调整。  (6)针对本文手势识别应用中定义的特定基本动态手势,引入改进的方向编码,以提高编码的准确率。对于复杂手势,采用拐点检测的方式进行分段识别。  本文所述的基于特征绑定的人脸检测经过一系列的实验测试,在2.8GHz主频、单核1G内存的PC机上,人脸检测准确率达到98.12%,基于人脸检测的手势识别准确率达到98.28%,并可以满足每秒钟25帧的实时性处理要求。同时该系统对于环境光照变化、用户人脸偏转、部分人脸遮挡、用户佩戴眼镜、用户手势不标准等情况均有较好的鲁棒性。
其他文献
为丰富村民文化生活,助力精准扶贫,由松滋市人民法院主办,松滋市涴市镇、松滋市群艺馆共同承办的2019全国扶贫日“松滋市人民法院送戏下乡助力精准扶贫文艺汇演”及“法官说
期刊
10月 17日是我国第 6个扶贫日,也是第27个国际消除贫困日.应城市人民法院院长叶天林及部分党组成员、帮扶责任人一行前往驻点帮扶村田店镇店坡村、城北办事处王庙村开展扶贫
期刊
【研究背景及目的】  乙型肝炎是一种由乙型肝炎病毒(Hepatitis B Virus,HBV)引起、对人类生命健康造成严重威胁的传染性疾病。HBV感染已经成为全球性的公共健康问题,它可引起
在下一代移动通信系统LTE-A中,协作多点技术(CoordinatedMultiple Point,CoMP)能够有效改善小区边缘用户的性能,已经受到广泛关注。但是要实现CoMP传输,基站需要获得协作区域内所
随着CDMA无线网络技术的快速发展,网络服务的覆盖范围也变得越来越广泛和深入。由于CDMA是自干扰系统,随着基站数量的大量增加和基站间距的逐渐减小,很容易就造成弱覆盖、无
最近的研究发现大鼠胰岛素启动子控制的 Cre重组酶系统(RIP-Cre)存在一些严重缺陷,即本应在胰岛 beta细胞中特异表达的 Cre重组酶也在许多胰腺外的组织特别是脑组织中表达。  
为庆祝新中国成立 70 周年华诞,弘扬爱国主义精神,大力推进脱贫攻坚成效巩固和乡村振兴战略实施,深入开展不忘初心、牢记使命主题教育,9月29日,咸丰县委政法委驻梨树垭村工作
期刊
新疆紫草(Arnebiaeuchroma(Royle)Johnst)属紫草科软紫草属,是传统的中药材,属于我国二级保护植物。该种具有典型的二型花柱现象。本论文将野外与室内观测相结合,对新疆紫草的形
“黄石港区检察院对白岭村的扶贫力度相当大.他们政治站位高、协作精神强,为白岭村的扶贫工作做了大量工作.”黄石市黄石港区驻白岭村扶贫工作队队长龚新福说.rn阳新县龙港镇
期刊
随着通信技术的发展,用户需求的提高,LTE-Advanced(Long TermEvolution)系统提出了很高的系统容量要求,而中继技术可以通过部署扩大小区覆盖,提升系统容量,但是在将中继引入传统蜂