基于深度学习的微表情识别及应用

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:binghuapeng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
微表情是一种短暂而不易察觉的人脸肌肉运动,微表情的发生不受自我控制,能够揭示了一个人可能试图抑制、隐藏或伪装的真情实感。不同于肌肉运动幅度较明显的宏表情,微表情可以反映一个人内心的真实想法,在公共安全、外交谈判、临床诊断等国内外热门领域中有广泛的应用。本文研究了微表情数据预处理技术、提出了基于3D-Dense Net模型和双注意力机制微表情识别算法。主要工作如下:1.针对微表情持续时间短、运动强度低、样本量小等识别难点,研究了微表情数据预处理技术。首先使用主观形状模型(Active shape model,ASM)和Procrustes方法对人脸进行检测和对齐,将图像数据统一为相同尺寸。其次,采用时域插值模型将SMIC,CASME-II和SAMM数据集中微表情视频样本统一插值为20帧。此外,使用数据增强的方法,通过平移、镜像、随机旋转等方法将数据样本量扩充为原始数据样本量的10倍。最后,使用基于TV-L1光流法放大微表情的运动轨迹,增大微表情的变化强度。2.提出了时域三维Dense Net网络(T-3D-Dense Net)的微表情识别算法。考虑到微表情为动态视频帧的形式记录,本文将Dense Net扩展为3D-Dense Net,有效学习微表情的时域特征。在此基础上,改进3D-Dense Net网络中传统的传输层为时域传输层,得到时域三维Dense Net网络(T-3D-Dense Net),从短、中、长三个不同卷积深度由浅入深提取微表情特征,有效提高微表情识别精度。3.提出基于双注意力机制和T-3D-Dense Net模型(DAT-3D-Dense Net)的微表情识别算法,根据模型的空间特征和通道特征进行权重分析,加强特征相关性较高区域的特征学习,抑制特征相关性较低区域,在SMIC,CASME-II和SAMM数据集上准确率分别达到了90.85%、92.28%、83.82%;F1指标分别达到0.8901、0.9127、0.8431,优于当前一些典型的微表情识别算法。实验结果表明,双注意力机制的引入,能明显提升模型性能。4.对基于微表情识别的测谎应用进行了探索,设计了测谎问题,基于本文提出的模型训练得到的权重结构,使用Python和Py Qt5设计实现了微表情测谎系统。测试表明,该系统能初步达到基于微表情的测谎应用。
其他文献
暗视觉图像是指在暗视觉环境中,使用图像传感器设备采集的原始图像,图像亮度和对比度低,噪声大,细节信息容易被强背景淹没。使用现有的算法对该类图像进行边缘检测,容易产生边缘丢失等问题,且由于其拍摄场景的特殊性,成对暗视觉样本的采集工作往往需要在可以控制光照条件的环境中开展,这限制了样本场景的丰富性。当前常用的边缘检测数据集样本大多是在正常光照下采集的,相较于其他视觉任务,边缘检测数据集的标注耗时长,难
学位
脉冲磁场在食品加工、疾病治疗等领域具有广阔的应用前景,由于其细胞层面的作用机理尚不明确,导致实际应用中脉冲磁场参数选择十分盲目。实验表明脉冲磁场可诱导细胞电穿孔,且细胞各组分存在不同程度的色散效应,而现阶段脉冲磁场仿真研究并未考虑电穿孔和色散效应,导致脉冲磁场作用下细胞跨膜电位分布计算不准确,进而导致实际应用中参数选择存在较大偏差。针对上述问题,本论文基于球形细胞三层介电模型、电磁场理论、电穿孔理
学位
近年来,随着计算机技术和通信技术的发展,线上教学相关应用愈发普及。虽然线上教学具有诸多优点,但是相较于传统的线下教学方式,线上教学存在师生反馈不足的问题。例如,在传统线下教学方式中,教师可以通过观察学生上课时面部表情变化来判断学生听课质量,而这在线上教学中很难做到。为此,针对线上教学中师生反馈不足的问题,本文对基于线上教学的表情识别进行了研究及应用,主要研究工作包括以下几点内容:1.提出一种适合于
学位
原发纵隔大B细胞淋巴瘤(PMBCL)是起源于胸腺髓质的一种特殊类型B细胞淋巴瘤。临床通常多表现为前纵隔巨大肿块,常伴有上腔静脉综合征和气道阻塞。大多数PMBCL表现为肿瘤细胞的弥漫性生长,局部可见结节状。PMBCL的分子学特征是Janus激酶/信号转导与转录激活子(JAK-STAT)途径的编码基因过表达,包括JAK2-STAT1和IL13A2。绝大多数的PMBCL均匀地表达CD45,常见的B细胞膜
期刊
<正>一、体质简介气虚体质:是以元气不足、气虚体弱、机体,脏腑功能状态低下为主要特征的体质状态。先天禀赋不足,后天环境例如饮食营养状况低下,精神情志刺激,社会因素的干扰,恶劣自然环境的影响,过逸或过劳,久病耗伤等都可以引发气虚体质的形成。这些因素使气的生成、输布、代谢等环节发生障碍,久之形成气虚体质。血虚体质:指血液亏虚,脏腑、经络、形体失养,以面色淡白或萎黄,唇舌爪甲色淡,头晕眼花,心悸多梦,手
期刊
印刷电路板(Printed Circuit Board,PCB)元器件检测在电子产品的生产中起到至关重要的作用。本文提出基于改进Faster RCNN的PCB极性元器件缺陷检测方法,该算法实现对元器件的分类、定位和极性方向识别,本文还根据元器件检测结果,实现对漏装、错装和极性反转等元器件贴装缺陷的检测。本文主要研究内容如下:1.针对PCB元器件种类多、尺度差异大,容易出现多尺度检测困难,尤其是小目
学位
目标跟踪技术在智能车、无人机、机器人等领域有着广泛的应用。在近距离场景下,目标一般表现为具有形状、轮廓等特征的扩展目标,通过目标的扩展信息辅助,跟踪精度可以得到有效改善。目标群中各目标之间的位置关系构成的拓扑特征作为一种重要辅助信息,同样可以用来提高跟踪精度。因此,将拓扑特征引入到目标跟踪方法中,研究拓扑特征辅助的扩展目标跟踪具有理论意义与实用价值。本文对目标间拓扑特征进行建模,将目标间的位置关系
学位
蓝莓在农业种植领域中并不少见,不少地区的农业种植人员依靠种植蓝莓带来良好的经济效益。在蓝莓病害中,最常见的是蓝莓僵果病,僵果病在农业种植中很难被发现,一旦有蓝莓植株感染到僵果病菌,就很可能导致大片的植株受到周期性的感染,从而影响到蓝莓最后的产量。所以,在蓝莓植株受到僵果病害胁迫时,相关农业技术人员需要及时对其进行根治,以免造成严重的经济损失。蓝莓僵果的病症表现并不明显,其主要表现特征是叶片和花朵上
学位
NB-IoT(Narrowband Internet of Things)因其覆盖范围广、功耗低、成本低等特点,被广泛运用于各种物联网应用行业。随着设备的不断增加,数据的处理和管理也变得更加复杂,系统吞吐量、延迟、能耗、Qo S(Quality of Service)等都面临着巨大挑战,因此,如何利用系统中有限的资源显得尤为重要。而窄带资源一般由基站在上行链路和下行链路中完成调度和分配的,所以,本
学位
雨刮控制系统作为汽车的重要功能组成部分,其反应速度、智能化程度直接影响到乘客行车的舒适性和安全性。目前智能雨刮控制系统普遍采用红外雨量传感器进行雨量识别,然而该传感器容易受环境因素干扰且识别精度较低会导致车辆的行驶安全问题,因此本课题具有理论研究和工程实践的意义。本文在视觉传感器获取雨滴图像的基础上,经过改进的Bi Se Net V2语义分割网络对雨量进行识别,结合红外雨量传感器识别的雨量,利用光
学位