视觉注意力机制驱动的维度空间人脸表情情感识别方法研究

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:woaiwx521
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人工智能技术的发展与应用为人类生活增添了色彩,人机智能交互越来越被重视。情感识别是人机交互中一个重要的方面,因为通过人的面部表情可以直观的了解一个人的情感状态。如何使用人工智能技术准确判断出人类的情感状态是近年来科学研究的热点。由于情感状态复杂多变,不同情感状态之间的差别细微,这导致情感识别更加困难。这种困难不仅体现在数据的选取上,情感特征的有效提取更加重要。首先,传统的深度神经网络是在实验室受控环境下采集的数据上进行的实验,由于受试者种族、年龄,以及受试者头部姿态,还有受试环境的单一性,使得这种环境下采集的数据无法准确表现出现实生活中人类面部情感状态的多变性与复杂性。其次,传统的面部情感特征提取方法无法对非情感特征进行有效的抑制,模型泛化能力较弱。本文在自然环境下采集的AffectNet数据集上对基于注意力机制与维度空间的人脸表情情感识别方法进行研究,提出了两种面部情感识别模型:第一,提出一种将残差注意力网络与Transformer、非局部神经网络相结合的面部情感识别模型。残差注意力网络通过学习输入图像的注意力权重,并根据权重的大小完成情感相关特征的筛选,用于解决传统特征提取方法不能抑制面部图像中非情感特征的问题。另外考虑到残差注意力网络在特征学习过程中不能对长距离特征之间依赖关系进行建模的问题,本文提出使用Transformer、以及非局部神经网络分别针对残差注意力网络输出特征图之间、以及特征图中所有空间位置特征之间的长距离依赖关系进行建模,进一步提高网络的性能。最后,基于维度空间模型完成情感识别。第二,由于残差注意力网络、Transformer都是堆叠的网络结构,这样导致网络结构复杂,计算难度大,并且优化困难。所以在第一种方法的基础上进行了改进,这里分别引入基于特征通道、基于空间位置的全局二阶池化网络代替Transformer、非局部神经网络去建模长距离特征之间的依赖关系。而全局二阶池化网络主要是通过计算特征之间的协方差矩阵,完成特征之间相关性的学习,进行长距离特征间依赖关系建模。最后,基于维度空间模型完成情感识别。AffectNet数据量庞大,其中被标注的人脸图像约42万张,并且人脸情感状态更丰富。通过在AffectNet上进行实验,对提出的两种方法分别进行评估。针对第一种方法,实验得到的基于Arousal、Valence的均方根误差为0.371、0.362,一致性相关系数为0.506、0.533。针对第二种方法,实验得到的基于Arousal、Valence的均方根误差为0.366、0.317,一致性相关系数为0.556、0.603。实验证明相比于传统方法,本文提出的面部情感识别模型性能整体上有所提高。
其他文献
随着经济发展、人口不断增多以及人民生活水平日益提高,城市垃圾的产生量也日渐增多。由于果蔬垃圾具有含水量高、营养价值丰富、易收集等特点,将其压榨脱水处理后粉碎,再与有机物混合去饲喂家畜,不但可以提高它的二次利用价值,还可以最大化地减小对环境的二次污染。本文主要以对果蔬垃圾进行压榨脱水的螺旋式果蔬垃圾压榨机为研究对象,完成了螺旋压榨机的结构设计,提出了压榨机内物料的受力分析方法,并完成了压榨机的优化设
学位
经济新常态背景下,经济增长的动力更加多元,在农业现代化建设中,区域性特色农产品建设具有十分重要的意义,打造农产品特色品牌,推进农业品牌管理的重要性日益凸显,特别是近年来,国家的重视和管理已使农产品的区域品牌得到更快速的发展。安徽省是我国的农业大省,区域内各类特色农产品的年产量和销售量都增长迅速,DS县更是依靠其优良的自然人文环境和品牌特色,农业和农产品发展取得了显著成效,著名的DS县砀山酥梨就是其
学位
传统的刚性机器人受到其自身刚性结构的限制,在日渐多样化的工程应用中所表现的性能难以完全满足人们的需求。研究人员在结构设计上受自然生物的启发,设计出模拟生物外形、结构或者功能的仿生类软体机器人,其中的典型代表为拥有灵活变形能力的仿章鱼机械臂。仿章鱼软体机械臂拥有近乎无穷多的自由度,能够在空间中任意地进行大范围的弯曲和扭转,并以此来实现对物体的缠绕和抓取。而在理论分析仿章鱼臂受力变形和与物体的接触方面
学位
X射线在医学诊断、军事国防等领域有着十分广泛的应用。高压直流电源作为人工产生X射线的核心部件,其性能决定了所产生X射线的质量。X射线高压电源向着高频化和高功率密度方向发展的同时,也带来了温升增大的严重问题,温度过高则对其内部元器件的稳定、可靠运行带来了致命影响。本文围绕X射线高压直流电源设计指标,开展了热设计与研究:(1)分析了低功耗全桥逆变LLC谐振软开关变换器的工作原理,完成了 X射线高压直流
学位
目的:探讨穴位贴敷结合促排痰护理在老年慢性阻塞性肺疾病(COPD)急性发作期患者中的应用效果。方法:回顾性选取2019年1月1日~2020年1月1日收治的老年COPD急性发作期患者72例为研究对象。按照护理方式不同分为对照组和观察组各36例,对照组采用促排痰护理,观察组采用穴位贴敷结合促排痰护理;比较治疗前、治疗后1、2周中医证候积分、肺功能指标[包括第一秒用力呼气容积(FEV1)和FEV1与用力
期刊
本文基于2019-2021年四川省小微企业调查数据,采用双重差分模型和三重差分模型实证研究疫情冲击下财政货币政策的助企纾困效应。研究发现:疫情冲击下财政货币政策的助企纾困效应明显,有效地帮助小微企业降低信贷成本和提高营业利润;财政货币政策的助企纾困效应会受到企业规模、企业分布区域等异质性因素的影响;作用机制分析表明财政货币政策主要通过缓解经营压力帮助小微企业纾困,“锦上添花”的效果比“雪中送炭”的
期刊
碳化锆(ZrC)作为超高温陶瓷材料,具有高熔点、高硬度、良好的导热导电性、强耐磨及耐腐蚀性等优异性能,在航空航天领域、核工业领域、热防护系统和动力系统等方面具有广泛的应用前景和应用价值。前驱体热解法制备ZrC/ZrC基复合陶瓷涂层材料能够有效解决发动机高温部件的关键问题,而传统ZrC前驱体制备方法需要使用乙酰丙酮、甲苯等有机溶剂,对环境与人体健康均有一定危害。因此,开展环保型ZrC基复合陶瓷前驱体
学位
面对复杂多变的国内外经营环境和数字技术的发展,传统财务模式逐渐无法满足公司发展的要求,中小保险公司的财务部门面对压力,探索通过构建财务共享中心促进财务数字化转型。但是,中小型保险公司在财务共享中心的构建和运营优化过程中,在模式选择、业务范围界定及未来发展方向等方面存在诸多不确定性。因此,深入研究中小保险公司数字化财务共享中心的构建,既为保险业财务共享服务的研究提供了新的视角,也为中小型保险公司提升
学位
飞行器再入大气层时工作环境颇为严苛,受到了热载荷与力学载荷相互耦合的影响。与此同时,随着飞行器速度不断提升,工作环境越加复杂,热防护系统设计逐渐朝着隔热与承载功能一体化、轻量化的方向发展。在这样的形势下新型结构得以出现。其中,点阵夹芯结构作为一种新型多功能轻质结构备受关注,其同时具备较好的隔热与承载性能,适用于热力耦合工况下,与热防护系统的需求十分契合。本文针对热力耦合工况下的一体式点阵夹芯热防护
学位
小微企业有效推动了我国经济的发展,缓解了就业压力,是推动投资、促进消费、促进创新的重要动力。税费负担是小微企业经营中占比较大的一项支出,近几年,我国出台了大量减税降费政策保护小微企业的发展,本文将在减税降费的背景下,通过佐证案例探究减税降费政策对小微企业的影响,并根据现存问题提出优化方案。
期刊