结合深度信息的微表情检测研究

来源 :江苏科技大学 | 被引量 : 0次 | 上传用户:gumozaoshi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面部表情在人们的日常生活中有着举足轻重的作用,微表情是一种可以揭露人们内心真实情绪的面部表情,它具有持续时间短、动作幅度小,不受人的自主意识控制等特点,通常不易为人眼所察觉。一般而言,微表情都和说谎情境相关,因此在临床医学、刑侦审讯和国家安全等领域有着重要的实用意义。然而由于微表情自身的固有特点,使得检测和识别微表情尤为困难。因此,构建出一个自动化的检测和识别微表情的算法具有十分重要的实际应用价值。目前,微表情样本量相对而言较为稀少,并且分布在不同的数据集中,有着一定的样本偏差等问题。同时现有的微表情检测算法大多聚焦于提取出具有代表性的空间特征,而忽略了微表情本身的时域特征。近年来,随着硬件设备的升级,深度信息逐渐进入人脸识别领域并展现出了多模态人脸识别的优势,同时深度信息在一定程度上可以较好地反映时域上的特征,目前已公开的微表情数据集中尚未有包含深度信息的微表情数据集。为了解决这些问题,本文主要做了以下工作:(1)参与创建了一个全新的包含深度信息的微表情数据集CAS(ME)~3,将微表情数据集扩展到了包含深度信息的多模态数据,并结合第三代微表情诱发范式收集了具有高生态效度的微表情样本。本数据集的样本量和目前已公开的微表情数据集样本总量相当,有效缓解了微表情样本不足以及分布在不同数据集而导致的样本偏差问题。(2)设计了一种结合滑动窗口和时空特征的微表情检测算法。首先将一个完整的微表情长视频通过滑动窗口分为若干个短视频,针对每一个滑动窗口进行人脸裁剪并计算相邻帧的光流场;接着将鼻子区域视为相对刚体移除全局运动,提取和微表情相关区域的时空特征,并将其进行多尺度滤波处理,从中筛选出可以表征微表情的特征,最后对所有结果进行融合标注,得到最终的微表情发生区间。(3)定义了一种结合深度信息的微表情手工特征——深度流特征,并将微表情检测算法从二维平面扩展到三维空间中,针对二维平面和三维空间的不同,改进了主方向的主光流矢量方向角的计算。为了改进空间光流的计算复杂度,将整体光流计算缩减为局部光流计算,并在此基础上融合时空特征进行微表情检测,提升了微表情检测算法的鲁棒性。(4)本文不仅为CAS(ME)~3数据集提供了微表情检测任务的基准算法,还基于Alex Net网络模型为微表情识别任务提供了包含深度信息和不包含深度信息的4分类以及7分类基线结果。
其他文献
碳纤维复合材料具有质轻高强、耐热耐磨耐腐蚀等优点,进而成为复合材料领域中研究和应用的增强材料之一。其中碳纤维发挥着阻裂增韧的重要作用,用于碳基和混凝土基体的多孔隙基体材料中可显著增强复合材料的力学性能。复合材料的性能增强和最终破坏仅为宏观表现,其纤维的作用机制、各组分的受力损伤演变则缺乏对应研究,所以需要运用细观力学的方法探究损伤拓展和失效机理,并做出有效预测。因此,针对贯穿型长碳纤维增强碳基、混
学位
原位自生钛基复合材料较传统钛合金有着更高的刚度和强度、更加优异的耐磨性和耐腐蚀性能,广泛应用于航空航天等领域。激光熔化沉积可以在构件制造过程中实现材料组分的调配并可实现快速成型,加快了复合材料的设计过程,非常适合于制备复合材料。本文使用行星球磨机制备了Ti6Al4V-B4C复合粉末,通过激光熔化沉积分别制备了(TiB+TiC)/Ti复合材料和Ti6Al4V钛合金以作对比,研究了增强相对复合材料的显
学位
本研究在Co-6Ti-11V基高温合金的基础上,加入不同含量水平的W、Mo、Cr、Mn和Nb五种难熔元素(文中元素含量均为原子百分比),利用XRD、SEM、TEM、DSC和高温压缩等测试和表征手段,研究了这五种难熔元素对Co-Ti-V系高温合金γ′相形貌和大小、γ/γ′两相晶格错配度、元素在γ/γ′分配行为、γ′相溶解温度以及合金的高温强度的影响。主要研究结果如下:在Co-6Ti-11V基体合金中
学位
在“双碳”背景下,我国已将燃料电池技术列入十四五能源领域科技创新规划中。氢气作为燃料电池的理想燃料在制备、运输和储存方面都面临着许多挑战。与氢气相比,甲醇具有来源广泛及储存运输方便的优势。因而直接使用甲醇为燃料的固体氧化物燃料电池(简称甲醇SOFC)受到了各国学者越来越多的关注。然而,积碳问题阻碍了甲醇SOFC的发展。本文针对直接甲醇管式SOFC的积碳问题设计了一种多孔内管结构,并对其进行了详细的
学位
报纸
在石油化工、塑料、制药和食品加工等行业的生产过程中会产生大量的难降解有机污染物,这些有机污染物具有难降解、稳定性强等特点,被排入到水环境中会对生态环境造成破坏。高级氧化技术是去除水中有机污染物最有效的方法之一,基于硫酸根自由基(SO4·-)的高级氧化技术因其成本低、操作简单和效率高等优点而受到国内外研究者的广泛关注。在众多活化过氧单硫酸盐(PMS)的方法中,过渡金属活化法是应用最为广泛的一种方法。
学位
报纸
学位
基于视觉的机器人抓取工作是目前计算机视觉研究在实际生活中的重要应用之一,已经广泛应用于垃圾分拣、工业零件加工、快递物流传输等方面。相比传统算法成本高且耗时长的问题,基于深度学习的机器人视觉抓取方法在确保高检测速度的同时,也减少了成本,且具有较高的准确度,体现出很高的实用价值。本文对基于深度学习的机器人视觉抓取方法中的物体位姿估计技术,与目标识别技术展开了相应研究,针对传统机器人抓取算法成本高、位姿
学位
目的研究黄芪多糖(Astragalus polysaccharides,APS)对卷曲乳杆菌体外生长的影响效果。方法测定卷曲乳杆菌在不同APS剂量的MRS液体培养基中随时间变化的吸光度(A值)。结果卷曲乳杆菌的A值随着APS剂量的增加而增大,且呈一定的时间-剂量依赖性,当黄芪多糖剂量为10μg/mL、作用14 h时细菌浓度达到峰值。结论黄芪多糖对卷曲乳杆菌体外生长具有促进作用,促生作用强弱与黄芪多
期刊