基于深度学习的遮挡人脸表情识别

来源 :山东大学 | 被引量 : 0次 | 上传用户:cmfu2008
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在人类的日常社交中,表情蕴藏着丰富的情感状态与意图信息。人脸表情识别技术可以使计算机理解人的情绪与心理,在人机交互、疲劳驾驶监测、测谎、精神疾病检测等多个方面具有一定的潜在应用价值。在现实世界中,由于环境复杂多变,人类的面部会受到不可预测的遮挡,造成传统受限环境下的表情识别算法表现不佳。因此,现实环境下的遮挡人脸表情识别是目前研究的焦点所在。对此,本文经过系统全面的调研,分析现有人脸表情识别算法的优势与壁垒,构建了包含多种遮挡的多年龄层次表情数据集,研究了遮挡人脸表情识别算法,并在开源的大规模表情数据集上验证了所提算法的优越性。本论文主要工作概括如下:首先,综述了基于卷积神经网络的情绪识别相关技术研究现状,探究其与表情识别技术的关联性,阐述了人脸表情识别技术的背景与意义、国内外研究现状以及与其他领域的交叉应用情况,并分析了现有表情识别技术的局限性,总结出人脸表情识别任务中亟待解决的关键科学问题。其次,针对遮挡人脸表情数据集缺失问题,且考虑到年龄与情绪表达的关联性,构建了多年龄层次的遮挡人脸表情数据集,包含视频集和对应的图像集。将每个样本标记为愤怒、轻蔑、害怕、高兴、中性、悲伤、惊讶七类表情,每种表情又细分为老年、中年青年、少儿三类年龄层级,并提供了多种任务场景下的基准实验结果。随后,针对遮挡情况下人脸表情的无遮挡区域聚焦困难问题,引入了自注意力机制,提出了内在关联融合的人脸表情识别算法。构建了一种全新的局部增强预处理方法,使其能够从局部区域、上下文、整体图像三个语义维度获取关键辨识度特征。通过基于统计指标的类池化单元根据面片的关键程度合理分组,实现了遮挡人脸表情区域的有效解耦。再进一步聚焦面片局部与全局间的独立性以及互补性信息,有效提高了人脸表情识别的准确度。最后,介绍了半监督学习算法及其在计算机视觉中的应用,针对遮挡人脸表情局部区域特征提取与表征困难问题,且考虑到充分利用现有的表情图像数据,提出了类半监督学习的局部区域强化算法。该算法基于CutMix局部区域数据增强方法构建而成,引入了通道-空间注意力机制来聚焦表情关键区域,并且进一步融合了半监督学习的思想来强化面部区域辨识度特征提取能力,实现了局部特征级增强,提升了数据利用率与表情识别性能。
其他文献
本文以提高人脸表情辨识的准确性为工作目标,对基于残差网络的人脸表情辨识算法展开深入研究。论文的重点研究内容包括:(1)针对传统卷积神经网络对图像特征通道关注度不足,进一步制约人脸表情辨别准确率的问题,本文以多层残差网络为基础,将一种通道注意力结构SENet(squeeze-and-excitation network)导入残差网络的残差块中,提出一类融合SENet通道注意力机制的改进残差网络SE-
文章通过感性工学方法研究护肤品包装瓶造型变化与感性意象展现之间的关系,为护肤品包装瓶造型的设计提供依据。通过图片分类法和问卷调查法得出护肤品包装瓶造型样本和感性词汇,根据语义差分法得到样本和感性词汇的关系矩阵。结合美学原则分析代表样本的设计要素,对比样本得出不同感性词汇对应的设计要素并验证。运用感性工学方法将人们的感觉量化,可以帮助设计师从现有产品中找出设计元素的最佳组合,减小设计结果的偏差。
在中医药振兴发展的时代背景下,加强中医药人才培养尤为重要。辽宁省中药资源普查项目吸纳了大量本科生和研究生参与,学生在普查过程中,综合素质全面提升。文章依托中药资源普查项目,从专业知识、实践能力、科研素养以及意志品格4个方面,探讨了中药资源普查对加强中医药院校人才培养的重要意义。
随着社会竞争愈发激烈、社会压力愈发沉重,大学生面临的压力也与日俱增,因此借助新媒体技术建立一个面向全国大学生的倾诉平台具有可行性和必要性。文章介绍了倾诉类公众号“我药听你说”的项目内涵和运营模式,并对该项目进行了思考与总结,以期为“互联网+”倾诉类服务平台的建设提供思路、方法和经验。
县级政府在我国起着承上启下的作用,一方面要领导乡镇这个基层政权,另一方面要配合省、市贯彻中央政策,因此对县的管理尤其重要。为适应社会发展,我国呈现出从“市管县”到“省管县”的趋势,这一变革率先从财政体制开始,体现在财政收支方式、方向及预决算制定等方面。财政体制变革在一定程度上克服了“市管县”期间的一些弊端,但并不是一劳永逸之策,从全局来看,要实行与财权配套的事权改革,持续优化省对县的监管制度和措施
首先分析了高职制鞋专业特点,然后基于特点深挖专业教学所蕴含的思政元素,在专业教育中可以融入工匠精神、团队意识、文化自信、职业素养以及美育教育,最终实现制鞋产业从“中国制造”迈向“中国创造”的伟大目标。
自国发[2006]17号文件发布以来,水库移民后期扶持政策已经实施了15余年。随着监测评估和绩效评价工作体制机制的逐步建立与完善,水库移民后期扶持增收效果成为后期扶持政策产出与实施情况优劣的主要考量指标之一。从提高政策整体实施水平角度考虑,如何对不同地域的水库移民后期扶持政策增收效果进行比较与评价是值得研究的问题。本文首先系统叙述了水库移民相关基本理论,界定了后期扶持增收效果的概念、内涵,并梳理了
高校是人才培养的主阵地,在当下社会对人才的需求越来越大的情况下,需要发挥好育人优势,革新教学模式。智慧教学是传统教学与信息技术全面融合的结果,是提升高校课堂教学质量的有效途径。在智慧教学背景下,进行线上线下教学,发挥线上、线下教学的优势,是时代发展的必然。基于此,本文从智慧教学的概念及智慧教学背景下开展线上线下教学的必要性入手,提出了智慧教学背景下线上线下教学模式构建的路径,以供参考。