融合注意力机制的迁移学习微表情识别研究

来源 :江西科技师范大学 | 被引量 : 0次 | 上传用户:renminjie
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
微表情是一种自发的、不易发现的、动作幅度小、持续时间短的人脸表情,广泛应用于司法侦查,医学诊断等领域。传统的机器学习算法识别率低,而将深度学习用于微表情识别任务时,通常选择增加卷积神经网络的宽度、深度以及丰富感受野等策略来提高识别率。但是由于微表情数据集样本规模较小,这些策略对提升微表情识别深度模型的效果有限。近年来,随着基于卷积神经网络研究的不断发展,迁移学习和注意力机制的应用成为提高深度网络泛化性能的有效手段,也给微表情识别模型的改善带来新方向。本文聚焦融合注意力机制的迁移学习微表情识别研究,主要贡献如下:1.针对微表情面部特征变化弱、关键特征损失较多和微表情视频序列中图像强度不一的问题,提出了两个基于Resnet-18网络的迁移学习改进模型。首先在CK+、融合A数据集(CK+和CASIA混合数据集)和融合B数据集(CK+、CASIA和Fer2013混合数据集)分别进行预训练,得到最好的网络模型参数;其次,为提取微表情的微小面部特征,降低关键特征的损失,分别引入一个卷积注意力模块(CBAM)和残差注意力模块并将其融入Resnet-18网络的第一个卷积层之后;此外,采用结构相似性确定微表情序列的关键帧;最后该网络在CASME2和SMIC微表情的关键帧数据集进行微调和迁移。实验结果表明,提出的迁移学习网络模型的识别性能与之前的方法相比有了较大的提高。2.针对微表情数据集样本不足,标签信息不完善的问题,提出了一个面向微表情识别的条件对抗域网络模型。首先以CK+宏表情数据集作为源域,SMIC和MMEW微表情数据集作为目标域;其次,Resnet-18网络对图像的特征信息进行提取;最后将分类器预分类的信息与Resnet-18网络提取的特征结合进行迁移学习。实验结果表明,基于条件对抗域网络模型的微表情识别方法与传统的迁移方法相比取得了更好的识别效果。
其他文献
本文主要是通过理清安徽池州傩文化的发展脉络,分析梳理其中的重要代表形式即安徽池州傩面具艺术,并对其艺术元素进行提取整合,探究在现行审美原则之下将这一传统文化元素与现代日用瓷完美结合的可行性方法。本文结合具体实例,阐述了池州傩面具艺术元素在现代日用瓷运用中应遵循的创作原则,并对三套现代日用瓷作品的设计构思与创作过程展开详细论述,旨在通过生活中常见的陶瓷产品向大众传递传统傩文化的艺术魅力,创新性的解决
学位
金属材料运用到美术创作中的历史悠久,早在六朝时期就已经运用到佛教美术中的壁画和雕塑创作了。随着艺术形式的丰富与创新,对金属材料在艺术创作中的运用与探索一直是艺术家所关注的内容,艺术家旨在通过新材料、新形式开创新的艺术语言,使绘画语言能够更加丰富多样。近代以来,金属材料也备受一些艺术家的重视,成为绘画语言的新载体,新材料的出现,给美术创作带来新的可能性。铜箔作为美术创作中的一种表现形式多样、装饰效果
学位
本学位论文利用cut算子,在偏序集上引入网的(拟)下极限收敛概念,讨论了它们的一些性质,特别地,对任意包含于σ2-拓扑的序相容拓扑τ,我们证明了:(1)一个偏序集P是τ-连续的当且仅当S-收敛关于τ是拓扑的当且仅当P是交τ-连续的且下极限收敛关于τ∨ω(P)是拓扑的;(2)一个偏序集P是τ-拟连续的当且仅当GS-收敛关于τ是拓扑的(3)一个交τ-连续偏序集P是τ-拟连续的当且仅当拟下极限收敛关于τ
学位
贵定县作为贵州省内重要的交通咽喉要道,有“贵阳门户”、“黔中咽喉”的美名。贵定县具有浓厚的历史文化底蕴和灿烂丰富的民间艺术文化,布依山歌——十八调作为贵定县布依族的非物质文化遗产,也是唯一一个传统音乐类非遗项目,是贵定布依山歌的重要名片和音乐代表。它包括十八种不同的曲调,篇幅短小、曲调优美,歌词没有固定的模式,一般由演唱者根据需要选择曲调进行即兴编唱。十八调的创造主体是全体布依族劳动人民,其演唱内
学位
体育中考考试制度发展至今经历多次改革,伴随着社会各界的关注体育中考体系逐步完善,体育中考的实施对促进青少年体质健康和引导青少年积极参加体育锻炼中发挥举足轻重的作用。2020年云南省玉溪市对体育中考考试方案进行改革,基于此背景下如何提出相应的教学方法、发展对策,是云南省初级中学面临的重要课题。本文通过实地考察法、问卷调查法、访谈法、数理统计法等研究方法,研究新方案实施以来对云南省玉溪市体育教师、师生
学位
在复杂网络中,通常使用节点来表示实体,用连边来表示实体之间的关系。网络是对数据进行表示和分析的常用结构。网络分析对于理解复杂系统的内部机制具有重要意义。经过多年研究,学者们发现,社区结构是复杂网络普遍具有的特性之一,即大部分的网络都具有社区结构。社区检测意在从复杂的网络中寻找可能相关的联系,挖掘网络中的社区结构,以帮助分析网络。作为网络分析的重要内容,社区检测吸引了各行业研究人员的关注。但随着网络
学位
InGaN和AlGaN是GaN基LED器件中的关键材料,但目前对InGaN和AlGaN热输运性质的研究还比较少,且多集中于热导率的测量和LED器件的设计,缺乏对材料热导率变化机理的系统探索。本文采用第一性原理计算方法结合声子玻尔兹曼输运方程,围绕GaN、InGaN和AlGaN的热输运问题,从晶体结构、热导率的声子贡献、声子输运性质和电子性质等方面进行了深入研究,本文研究结果揭示了GaN合金材料热导
学位
本学位论文引入了F-分配偏序集的概念,讨论了它的一些性质,并研究了几类代数偏序集之间的关系。首先证明了偏序集p是F-分配的当且仅当由P中所有有限集生成的cut构成的集族也是F-分配的;然后讨论了预代数偏序集和Frink拟代数偏序集之间的关系,证明了偏序集P是预代数的当且仅当P是交预连续和Frink拟代数的;最后讨论了强代数偏序集和广义强代数偏序集之间的关系,证明了偏序集P是强代数的当且仅当P是预代
学位
本学位论文主要利用Nevanlinna值分布理论和Hadamard因子分解定理研究了两类Fermat型微分差分方程解的精确表达式。该论文的主要内容包括:第1章引言介绍了研究的背景和研究意义。第2章预备知识介绍了 Nevanlinna理论和微分、差分领域的相关知识。第3章我们主要研究了 Fermat型微分差分方程ω"(z)~2+[P(z)(d1ω(z+c)+d0ω(z))]~2=Q(z)和 Ferm
学位
跨膜蛋白通常需要在脂质双分子层中形成稳定的寡聚物以激活某些特定的生物功能,例如:部分配体只与跨膜蛋白的二聚物结合以调控特定信号在脂质双分子层中的运输。癌症、糖尿病和囊性纤维化等疾病都与寡聚物模态造成的受体功能障碍直接相关。建立一套基于跨膜蛋白序列的寡聚物模态及其基序预测算法,对理解跨膜蛋白的生物功能及其靶向药物的研发有着重要意义。许多基于模式识别与机器学习理论的寡聚物模态预测模型和基序搜索算法被提
学位