基于多尺度分层双线性池化网络的人脸表情识别算法研究

来源 :广西大学 | 被引量 : 0次 | 上传用户:laire723
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面部表情包含着丰富的情感信息,包括人的心理活动和自然思想状态等,深刻影响着人与人之间的交流体验。人脸表情识别技术作为计算机辨别人类表情状态的重要手段具有广阔的应用前景,被广泛应用于个性化推荐、远程教育、医学辅助、驾驶辅助、智慧城市、人机交互等领域。近年来,随着人工智能的发展,表情识别成为了计算机视觉领域的研究热点,吸引了大量研究学者的关注。本文从特征提取、改进损失函数两个角度着手开展研究工作,主要工作和创新点总结如下:1、针对人脸表情识别类内差异大、类间相似度高的问题,提出了一种基于角度距离组合损失函数与小尺度核网络的表情识别方法。该方法参数量较少并提高了网络的类间特征分离和类内特征聚类的特征判别能力。实验结果表明该方法可以有效提高表情识别率。特别地,在CK+人脸表情公开数据集上,本文提出的角度距离组合损失函数,相对Softmax和Island损失函数分别提高了3.03%、1.11%。2、针对现有的人脸表情识别模型没有利用跨层级间的多尺度信息的问题,设计了一个用于人脸表情识别的多尺度双线性池化网络(Multi-scale Hierarchical Bilinear Pooling Network,MHBP)。通过精心设计的三种不同的粗细尺度网络提取人脸表情全局特征。并引入了分层双线性池化层,集成多个同一网络以及不同网络的多尺度跨层双线性特征来捕获不同层级间的部分特征关系,从而增强模型对面部表情微妙特征表征的判别能力。实验结果表明,MHBP网络在FER2013公开人脸表情数据集的识别准确率比3?3,5?5,7?7单一尺度网络分别提高了3.037%,2.034%,2.173%,验证了粗细尺度网络的优越性。3、针对卷积神经网络逐层卷积、池化导致丢失有用特征信息的问题,提出了一个多层特征信息融合的方法。该方法将不同阶段的所有卷积层输出的特征图拼接融合,并通过反卷积逐层上采样还原到上一阶段池化前的特征图大小,并与融合后上一阶段的所有卷积层做加性融合。最后把每阶段的加性融合特征图,通过全局平均池化降维添加到全连接层分类。最终提升了人脸表情识别的性能。结合2、3点的方法,最终在FER2013和CK+数据集上识别率分别达到73.725%、98.283%,优于较新的人脸表情分类算法,具有较强竞争力。
其他文献
针对小规模、老龄和废弃垃圾填埋场生物炭改良土壤覆盖层存在的防水和促进CH4吸附氧化之间的矛盾,本研究制备了疏水性生物炭并优化其制备条件;通过批式吸附试验,考察了土壤、
水在沥青混合料中的传输和分布是沥青路面水损害发生的本源,而细观空隙是水流入侵的核心介质。目前,国内外普遍基于宏观唯象的沥青混合料渗透性研究,忽略了水流在复杂材料结
豆酱作为一种传统调味酱,长期以来深受民众喜爱并广泛参与到人们的日常生活中。然而,当前豆酱类制品的发酵生产过程中面临生产环境及生产工艺粗放、关键工艺条件缺乏精确控制、原料利用率低及功能性缺乏等问题。基于此,本论文探究了豆酱制曲和制酱两步关键工艺中的精确控制,以期建立规范化的豆酱生产工艺。在此基础上,为进一步提升豆酱的功能性,本文首次实现了富集γ-氨基丁酸(γ-Aminobutyric acid,GA
絮凝沉降是甘蔗制糖澄清工艺一个重要操作,而在现代沉降澄清技术中,有机高分子絮凝剂的絮凝技术扮演着重要角色。然而有关蔗汁在高温条件下的絮凝机理及动力学研究仍为空白,且有机高分子絮凝剂在溶解、制备和使用过程中由于时间、搅拌和温度等因素发生降解,降低了絮凝效率;另外,絮凝剂溶液加入的水量,需要在后续工序中进行加热和蒸发,增加了能耗。乌克兰有关机构开发了一种新型有机高分子絮凝剂系列产品,具有耐高温、可粉体
肺癌是目前发病率和死亡率最高的恶性肿瘤之一,约80%—85%的肺癌为非小细胞肺癌(NSCLC),临床上多使用分子靶向药物作为其标准治疗方案。随着时间的推移,NSCLC患者很容易对药物产生耐药性,且耐药发生情况因人而异,增加了临床治疗的难度。肿瘤是一种随着时间而变化的动态生物学系统,因此可以从它的变化过程中提取一些有助于分析患者耐药发生情况的信息。近年来,深度学习技术得到了迅速的发展,同时在医学图像
摩擦是材料表面和界面上的宏观及微观动态行为,广泛地存在于日常生活和工业生产的各个方面。因此,研究润滑流体的性质和摩擦现象对于减少磨损和节约能源来说是非常重要的。含氧燃料被公认是较有效的石化替代燃料。研究发现,柴油机中使用碳酸二甲酯-柴油混合燃料有助于降低炭烟排放。部分燃料未燃烧,会进入到润滑油中导致燃油稀释。同时,随着柴油机性能的不断提高,对润滑油的性能也会有更高的要求。本文以润滑油的基础油做研究
现场运行设备的状态是一个实时动态变化的过程,由于运行设备对象模型的动态变化性和设备的各个测点之间存在着大量的交叉耦合,如何根据设备当前运行状态快速、准确、可靠的创建设备动态监测模型是建立故障早期预警的关键。现在火电厂均建立了SIS等信息化软件平台,这些系统存储了海量的设备运行数据,这些丰富的数据资源的背后包含大量潜在的知识。充分挖掘现有设备运行的数据规律,并从中找到最大化发挥设备性能的方法和知识,
红麻和油菜在广西的栽培季节有重叠,前者生育期为8月至12月,后者为9月至次年4月。为充分利用光热和土地资源,本试验选用2个红麻品种和3个油菜品种(系)为研究对象,油菜分别为恢R7、R1、夏白,红麻分别为P_4A/P_3B、P_3A/F_3B。在广西大学农学院实验基地种植,探讨红麻与油菜间套作的可行性。设置了单作红麻、单作油菜、行间套种和株间套种四种种植模式,并调查不同种植模式对红麻和油菜植株生长发
随着人们的生活水平和现代社会的计算机技术的飞速发展,图像作为一种信息的载体,其中包含的信息非常的多,故人们对图像分辨率的提高提出了进一步的要求。针对这一日益提高的要求,现在迫切的需要是寻找并开发出有效提高图像分辨率的方法来提高图像质量以还原更多图像承载的信息,因此图像的超分辨率重建是计算机视觉领域的一个重要的课题。近年来,计算机的浅层学习与深度学习等理论和技术有着重要的发展,使得图像的超分辨率重建
硅溶胶无机涂料在环保、机械性能、耐久耐候性方面有无可比拟的优势,但是其施工性能、成膜性能等方面存在明显短板。为了提升硅溶胶涂料的耐水性能,减少涂膜开裂并提升硅溶胶涂料的施工性能,本文选取了甲基硅酸钾(PMS)为硅溶胶疏水改性剂,研究了PMS改性硅溶胶(PMS-Si)的机理及对其理化性质的影响。在此基础上,制备了PMS改性硅溶胶无机涂料和PMS改性硅溶胶-硅丙(PMS-Si-SAE)杂化乳液,并对其