动漫人物图像面部表情识别算法的研究与实现

来源 :刘紫含 | 被引量 : 0次 | 上传用户:winyx000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
虚拟人物与人的情感交互一直受到人们的期待,而进行情感交互的前提是虚拟人物可以进行情感分析。虚拟人物若要拥有情感分析的能力,首先要能够识别情感,所以本文做的是情感识别的任务。虚拟人物最终需要和人进行交互,交互过程中它要借助自己对表情的理解去识别人的表情,所以论文中选用了动漫人脸表情数据做训练,真实人脸表情数据做测试,期望实现跨域识别,为表情识别的发展及实现虚拟人物和人类的交互提供一定的基础。由于动漫人脸表情特征和真实人脸表情特征的分布不同,本文先将动漫人脸表情和真实人脸表情转换至同一个风格的数据集中,使动漫人脸和真实人脸使用同一套表情表达方式。然后借助迁移学习方法,对变换后的特征进行跨域的情感识别。在图像风格转换任务上,本文提出一种基于不成对数据样本的风格转换方法。该方法以生成对抗网络为通用基础网络结构,然后将沙漏型网络、注意力机制和基础网络结合在一起,改进成新的网络结构。改进后的网络通过利用图像的空间关系和图像各区域的权重关系,使转换后的图像更清楚,更好的保留原图的细节特征。本文在数据集JAFFE、CK+上进行实验,结果表明改进后网络在转换图像风格任务上的有效性。在情感识别任务上,本文提出一种基于迁移学习并结合注意力机制(SGE)和残差网络(Res Net)的表情识别方法。该方法通过将Res Net基本模块和注意力机制模块结合起来,构建出一个新的Res-SGE基本模块,并将这个模块应用在Res Net中。然后利用改进之后的Res Net网络搭建迁移学习的基本网络,并加入MMD距离损失函数来度量源域和目标域之间的距离。通过实验验证,本文所提出的表情识别方法在数据集JAFFE和CK+上的识别准确率分别提高了7.55%和10.85%,这说明所提出的表情识别方法的有效性。
其他文献
随着我国市场经济的持续高速发展,国有企业作为国民经济中的重要组成部分,正扮演着越来越重要的角色,在经过一系列的改革以后国有企业又重新焕发了新的活力,在复杂的国内外生存环境中,正以一种全新的面貌参与全球的市场竞争。作为国民经济发展的重要产业,建筑业已成为我国经济发展的重要引擎和加速器,而国有建筑企业作为建筑业的主体,在市场中的地位和作用日益凸显。面对日益激烈的市场竞争,创新和活力已经成为企业不可或缺
学位
本研究从言语行为理论的角度分析网络直播平台对课堂教学言语行为的影响。通过分析语文课堂教学中常用的教师言语行为的类别与构成因素,探究网络平台的教学言语行为的实施受到网络直播平台的制约时,在教学手段、教学语言、教学方法上产生的变化,探究适用于网络直播教学的教学组织模式与教学环节设计。全文共分为五个部分:绪论。对教学言语行为与网络直播平台现有的研究成果进行综述,阐释本文的研究思路。第一章线下传统课堂与网
学位
社会的生产、生活离不开能源,社会的迅速发展也促使了对能源的急剧需求。然而随着化石能源的枯竭和环境污染,给人类社会带来了一系列能源挑战和环境问题。因此人们开始关注和开发可再生清洁能源,在众多的清洁能源中,由于太阳能无穷的储备量和利用的便捷,受到越来越多研究学者的青睐。其中太阳能电池作为将光能直接转化为电能的设备受到了社会越来越多的开发与研究,如何改善和提高太阳能电池的光吸收,进而提高太阳能电池的光电
学位
作为“最后一公里”最有潜力的方案之一,电力线通信(Power Line Communication,PLC)无需重新布线,可在现有的电力线路上传输信号,且成本较低,近年来被广泛应用于智能电网、智能车联网、智能家居等各个方面。由于电力线通信系统存在严重的噪声干扰和较强的信号衰减,正交频分复用(Orthogonal Frequency Division Multiplexing,OFDM)技术凭借其频
学位
目的:应用经会阴四维盆底超声(Pelvic Floor Ultrasound,PFU)技术探讨女性前盆腔多项超声参数以及尿道内口是否出现漏斗化等指标对压力性尿失禁(Stress Urinary Incontinence,SUI)的诊断价值,以期为临床医师提供诊断依据,从而为进一步有效的女性盆底功能康复治疗提供一定帮助。资料与方法:1.研究对象将2019年1月至2021年6月于我院诊断为SUI的10
学位
作为中华民族灿烂文化的忠实记录者,文言文用文字的方式承载着古人对天地山川、人生百态、社会价值等的深刻见解与思考。在当代的高中语文教学中,如何提高文言文教学效率是众多学者与教师共同关注的话题。同时,伴随着《普通高中语文课程标准(2017版)》的修订和完善,语文教学更加关注学生必备品格与关键能力的养成,对文言文教学这一重要板块提出了更高、更全面的要求。本文从高中文言文语感教学的现实境况出发,以问卷调查
学位
语法是语言教学中重要的教学内容,有效的语法教学需让学生能够体验到语法的交际功能,需要把“意义-形式-功能”有机结合,而互动中教授语法能够实现此目的,但新手教师由于缺乏经验,更喜欢自己讲解语法。因此,本研究旨在探究新手教师是否会互动教学,以及他们对语法教学的理解和课堂实践。为了解决此研究问题,作者选取了四位新手教师作为受试对象,对每位教师同一内容的一节语法课“情态动词的完成时”进行详细的课堂观察和分
学位
《义务教育英语课程标准》提出基础教育阶段英语课程的基本理念,即注重素质教育,侧重于通过自主合作探究等学习方式完成课堂任务1。该理念为课程改革奠定了基础,也为课堂改革提供了方向。近年来,切块拼接法进入人们的视线,切块拼接法是将学习材料分割成几部分并分发给不同层次的学生,使他们通过交流协作最终掌握完整材料的一种教学方法。切块拼接法中所提倡的竞争与合作是我们素质教育所倡导的,它具有激发学生的学习动机,提
学位
二十一世纪以来,随着中国经济的快速发展,国民对于教育重视程度的不断提高,以及国家政策对出国留学的大力支持,中国留学生人数快速增长。与此同时,市场上涌现出大量的留学咨询公司和工作室。尽管留学市场规模逐步扩大,但行业准入门槛较低,越来越多的竞争者不断加入,水平参差不齐。不同机构之间出现了产品、服务同质化现象,为民营留学公司的管理带来了挑战。S民营留学咨询公司是一家以出国留学咨询和申请服务为主营业务的地
学位
管道运输是大规模的石油与天然气最重要的运输方式之一。随现代微合金化管线的发展,低成本高Nb管线钢的开发和应用,高Nb管线钢已成为不同钢级管线钢最通用的合金化方式之一。但到目前为止,Nb对管线钢及钢管的性能的影响仍缺少统一的认识,不同企业在Nb含量的设计和应用仍存在很大的差异。因此,系统研究Nb含量对管线钢及焊接接头的组织和性能的影响,对低成本高Nb管线钢研究具有重要的意义。本论文获取大量实际生产的
学位