微表情识别的理论和方法研究

来源 :东南大学 | 被引量 : 25次 | 上传用户:zhubaoqiu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
微表情是一种持续时间非常短暂的表情,它能够表达人们想要隐藏的真实情感。近年来,微表情识别因为其潜在的应用价值而逐渐引起了研究者的关注。目前微表情识别的研究仅处于初始阶段,一是微表情数据库的稀少,二是由于微表情本身的细微行为特点导致大多数特征提取方法不鲁棒。针对这些问题,本文受最近深度学习的巨大成功的启发,探索和研究其在微表情识别中的方法及应用。本文的主要工作总结如下:(1)建立了一个诱发的微表情数据库。微表情数据库是进行微表情识别研究的重要支撑,而目前通过诱发的微表情数据库太稀少。本文搭建了微表情诱发环境,利用摄像机采集了被试观看诱发视频的微表情视频,从中挑选出了微表情帧序列,标注了微表情的标签,建立了微表情数据库,并总结了建库的一些难题。(2)概述了一套完整的微表情识别工作,包括微表情帧序列预处理、微表情检测、微表情特征提取、微表情分类,进行了一系列基准实验。(3)提出了一种基于深度置信网络(Deep Belief Network, DBN)的微表情识别方法。将深度学习与微表情识别研究结合在一起,先对微表情数据进行扩充样本,再提取动态特征输入到深度置信网络中,并在预训练、微调过程中调节参数,最终得到了较好的识别率。(4)提出了一种基于三维卷积神经网络(three dimensional Convolutional Neural Network,3D-CNN)的微表情识别方法。目前,卷积神经网络(CNN)是人们研究模式识别问题最常采用的深度学习网络模型之一。然而,CNN的功能仅仅局限在对于2D输入的处理。本文在CNN的基础上,发展了一种三维卷积神经网络(3D-CNN)的网络结构,用3D-CNN提取微表情动态视频的特征,并对其进行分类。3D-CNN是一种新的深度学习网络,增加了对于时间信息的卷积,因此可以处理各种3D输入,可以应用于视频系列分类任务。(5)开发了一个简单的微表情自动检测和识别系统。该系统分为两个部分:一是微表情自动检测部分,用来检测微表情视频的起始帧、峰值帧、结束帧;二是微表情自动识别部分,用来对微表情视频进行五类情感分类。
其他文献
分析了国内外氯碱产业的动态,探讨了国外氯碱生产与市场形势变化对国内氯碱行业的影响。
对山东省氯碱行业的现状和市场发展形势进行了分析,并针对国家宏观政策带来的挑战和机遇,指出了山东省氯碱行业可持续发展的几点建议。
期刊
畅谈了赴KK&K公司PGW—Tmbo制造部考察的感想:目前企业竞争趋于白热化,企业必须培育核心竞争力;中小企业必须全身心地投入做好一件事,坚持走专业化的道路,这是企业发展的根本。
文章通过阐释"课程思政"的内涵,从而分析了"课程思政"视域下创新实践课程教学的设计与实施,具体包括选题、研究方案的设计与实施、研究结论和研究报告的撰写、考核和评定四个
拟定于2016年7月14日--17日在山西省太原并州饭店(山西省太原市迎泽大街118号)召开由《听力学及言语疾病杂志》编辑委员会、中华医学会耳鼻咽喉头颈外科学分会听力学组及嗓音学
在高职院校人才培养过程中,辅导员是与学生接触最为密切的指导者和管理者,承担教育、引导和管理学生的重要职责,但目前高职院校普遍存在对辅导员队伍建设重视不够、辅导员工
华夏医学杂志社从2010年5月正式运行网上投稿系统,所有稿件需从网上投送。《华夏医学》网上投稿系统网站:www.hxyx2010.com。首先请在“用户登录”处,进行用户注册:用户和密码自己
1.若要上级不得安宁,上访。2.若要下级不得安宁,检查。
在传统社会,女性当领导是极端困难的,各朝各代的封建帝王往往把限制女性参政当作基本国策来看待,其结果,使得世人普遍把女性当领导喻为“牝鸡司晨”。然而,在这种文化的铁藩篱中,中