基于局部特征的面部表情识别研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:power_gq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为使智能设备更人性化的与人类进行交互,可以通过识别人类面部表情感知情绪状态来实现,因此面部表情识别有着巨大的科研价值和广泛的应用前景。近些年来,基于图像的面部表情识别进行了很多研究,但是由于遮挡、光照、姿态等因素的影响,快速且准确的识别面部表情仍然是一项艰巨的任务。针对当前一些局部特征提取算法存在的问题,本文主要研究内容如下:(1)分析了局部方向模式(Local Direction Pattern,LDP)和局部方向数模式(Local Direction Number Pattern,LDN)。针对LDP模式在梯度空间中忽视方向信息,以及LDP和LDN模式忽视灰度信息等问题,设计了局部显著方向纹理模式(Local Prominent Direction Texture Pattern,LPDTP),首先在图像的梯度空间中寻找显著的方向特征进行编码,然后在图像的强度空间中对在显著方向上的灰度信息进行编码,得到具备梯度信息和灰度信息的编码特征;在面部的平坦区域由于信息量较少,通过设置一个自动阈值θ根据梯度强度去除平坦区域的编码特征。实验结果表明LPDTP的特征表征能力以及对高斯噪声的鲁棒性均优于LDP与LDN。(2)考虑到局部二值模式(Local Binary Pattern,LBP)能够有效编码图像纹理信息,但其特征维数较高。通过分析中心对称局部二值模式(Central Symmetric LBP,CS-LBP)和中心对称局部导数模式(Central Symmetric Local Derivative Pattern,CS-LDP),对CS-LDP进行改进,提出多方向中心对称局部二值模式(Muti-directional CS-LDP,MCS-LDP),使用四个特征描述符从不同方向对图像纹理特征进行编码,然后将提取的特征向量进行级联融合,能够充分有效的提取图像纹理信息,并引入主成分分析法(Principal Component Analysis,PCA)对级联特征进行降维,去除冗余信息同时降低特征维数。实验结果表明MCS-LDP的识别率相较于CS-LBP和CS-LDP有明显提升。(3)由于单个特征表征能力有限,通过融合多个特征能够更有效表征图像信息。本文提出的LPDTP主要提取图像的梯度信息,特征稳定好;提出的MCS-LDP主要提取图像的纹理信息,特征识别率高,融合这两个特征向量可以很好的起到互补作用。使用串联融合方式将LPDTP特征向量和MCS-LDP特征向量进行特征层融合,使用PCA进行降维,实验结果表明融合特征能够有效提升识别率;使用加权投票法对LPDTP、MCS-LDP和CS-LDP进行分类器层融合,实验结果表明通过加权投票进行多特征融合同样能够提升识别率。(4)设计并开发了面部表情识别系统,使用QT完成系统和用户界面的开发,通过调用OpenCV计算机视觉软件库的图像处理算法对输入图片进行处理。系统由数据采集、面部检测和表情识别三个主要模块组成;实现了对图像、视频和摄像头的读取和表情识别等功能。
其他文献
随着第五代移动通信技术的商用,移动用户数量不断增长,各种应用场景下的信息传输需求和能量供应需求日益多样化,这些都给移动通信网络的设计带来巨大的挑战。在第五代移动通信以及面向未来的第六代移动通信中,非正交多址接入(Non-Orthgonal Multiple Access,NOMA)技术因其能够满足用户体验需求、提高频谱效率而受到人们的广泛关注。NOMA和协作通信技术融合下的协作NOMA技术通过视距
学位
微马达由于精巧的设计、强大的自混合能力、易于修饰及低功耗等特点,在环境修复领域具有巨大的应用潜力。基于低成本、易于制备、开放的框架及可调的组分等优势,类普鲁士蓝衍生物受到催化微马达工作者的青睐。本论文研究工作主要是通过共沉淀和热处理法制备了新型的双金属类普鲁士蓝衍生氧化物微马达,在H2O2溶液中均展现出优异的自主运动性能和方向可控性,并应用于水体中罗丹明B以及苯酚的去除。主要研究内容和结果如下:1
学位
过渡金属催化的偶联反应是现代有机化学中构建新的碳-碳键、碳-杂原子键的重要方法。从20世纪初开始,过渡金属催化的偶联反应取得了长足发展,其中Ullmann反应就是非常重要的一类反应。Ullmann反应从最初使用的铜催化剂到有重大转折的镍催化剂,再到20世纪70年代钯催化剂的发现及广泛应用,Ullmann反应取得重大突破。1901年,德国化学家Fritz Ullmann首次报道了卤代芳香族化合物与C
学位
进入信息化时代后,图像俨然成为了人们获取并传播信息的重要途径。然而,在图像的摄取、存储和传播过程中,许多不可避免的因素会导致图像质量降低,比如噪声、成像环境、成像设备等。数字图像处理技术在该时代背景下迅速发展并且为许多行业(医学、航天、军事等)的改善与发展提供了帮助。数字图像处理是指利用计算机技术对图像进行复原、增强、分割、特征提取等处理的方法。本文主要研究图像处理问题中的图像复原与分割问题,主要
学位
波长位于1000-1700 nm的近红外二区(NIR-Ⅱ)荧光成像技术,因其发射波长较长,光散射、光衰减和组织自发荧光干扰较少,展现出更优的组织穿透深度和更高的空间分辨率等优势。然而,目前近红外二区荧光成像材料在肿瘤成像及手术导航等生物应用方面仍面临着诸多挑战,如功能性单一、稳定性低和水溶性差等问题。因此发展多功能、高稳定性NIR-Ⅱ荧光探针是亟需解决的问题。我们首先合成了一种基于噻二唑并[3,4
学位
近年来,发光锰(Ⅱ)配合物由于具有高发光量子效率、易制备、低成本、低毒性等优点,在平板显示、信息加密、X射线探测与成像等领域显示出巨大的应用前景。其中,X射线探测成像成为近几年的研究热点。成像所用的核心部件闪烁体具有将电离辐射转化为可见光的能力,在X射线成像中起着至关重要的作用,可应用于辐射暴露监测、安全检查、太空探索和医学成像。发光锰(Ⅱ)配合物因其优异的光物理性能被认为是一种极具应用潜力的闪烁
学位
基于热活化延迟荧光材料的有机发光二极管发展迅速,其理论100%的内量子效率突破了传统荧光有机发光二极管的上限,克服了第二代磷光有机发光二极管高污染高成本的缺点。相对于红光和绿光材料,在设计和合成高色纯度、高效率和高稳定性的热活化延迟蓝光材料方面仍然存在不足。因为强的分子内电荷转移对降低最低单线态激子和最低三线态激子之间的能隙和促进反向系间窜越而产生热活化延迟荧光至关重要,但这往往导致发光红移而不易
学位
有机给受体复合物是一种新兴的有机半导体材料,其制备方法简单绿色、无需额外的复杂合成过程,通过液相、气相或固相混合,单纯依赖分子间的相互作用(电荷转移、π-π相互作用、氢键、卤素键等)形成高度有序的分子尺度异质结-给受体共晶材料。但是由于目前高性能的给受体共晶材料种类比较有限、超分子结构难以精准调控、受环境以及材料本身影响较大等缺点,高性能、多功能的有机给受体复合物的开发研究仍存在诸多困难和挑战。基
学位
恶性肿瘤严重威胁人们的身体健康,如果发现时已经到肿瘤晚期,多数病人已没有了手术根治的机会。因此,癌症的前期诊断和治疗至关重要。荧光探针和光学成像技术能够在细胞水平研究生物过程,因此受到了人们极大的关注。与其他的临床影像技术相比,荧光造影以其良好的空间分辨率、单分子水平下的高灵敏度、更好的信噪比、对生化活性的优越特异性和非破坏性,为研究分子水平上的生物过程提供了巨大益处,对于早期疾病诊断非常有帮助。
学位
自动调制分类(Automatic Modulation Classification:AMC)是指接收机在对接收到的信号的调制类型未知的情况下,根据信号本身的信息判断出信号类型的技术,也是非合作通信系统的基础。随着调制类型的增加和通信环境的恶化,传统的AMC算法难以实现有效分类,因此寻找高效的AMC方法成为亟需解决的关键问题。得益于计算资源和大数据的蓬勃发展,深度学习技术在计算机视觉、通信等领域的
学位