基于条件生成式对抗网络的面部表情迁移研究

来源 :华中师范大学 | 被引量 : 0次 | 上传用户:xiahou001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能的迅速发展,自然人机交互受到人们的广泛关注。面部表情作为人们日常交流中情感行为的主要表现形式,是自然人机交互的重要组成部分。近年来,由于深度学习在计算机视觉领域的广泛应用,人脸图像生成已经取得了较好的效果,但仍难以实现自然人机交互,主要原因是情绪在自然人机交互中起着重要的作用,而机器不能通过模拟人脸面部表情来表达交流时的情感状态。因此,让计算机具备模拟面部表情的能力对自然人机交互的发展具有重要的研究意义。面部表情迁移研究受到越来越多国内外研究学者的关注,已经成为计算机视觉领域的热门课题。面部表情迁移是通过构建迁移模型,将源人脸图像上的表情移植到目标人脸图像上。在面部表情迁移研究中,面部表情通常分为七类,迁移的主要任务是在确保身份特征一致的情况下根据需要迁移生成不同面部表情。已有面部表情迁移模型虽然取得了一些成就,但仍存在需要采用配对表情数据集或只能实现两个表情域之间的转换、难以保持面部身份特征的一致性、难以在单个模型中同时实现不同类型的面部表情迁移等问题。为克服已有研究存在的问题,本文设计并构建基于条件生成式对抗网络的面部表情迁移模型,从解决配对数据集,保持面部身份特征以及简化网络模型等问题进行研究。本文工作包括以下几个方面:(1)构建一种新的基于条件生成式对抗网络的面部表情迁移模型,通过给生成网络指定表情域标签信息,学习七种表情域图像的映射,最终生成七种类型的面部表情。(2)在生成网络中引入重构损失函数,通过计算重构表情图像与原始表情图像之间的差异,确保生成网络重构的表情图像与原始表情图像身份特征的一致性。(3)在生成网络中增加伪图像的域分类损失函数,生成网络试图最小化该损失,确保生成的伪造表情图像可以被正确分类为目标表情域;在判别网络中增加真实图像的域分类损失函数,判别网络通过最小化此损失,正确分类真实图像到对应原始表情域;实现在单个生成网络中同时生成七种面部表情。通过在CelebA数据集、CK+数据集以及FERG-DB数据集上的实验表明,本文设计的面部表情迁移模型,在进行七种面部表情迁移时具有良好的鲁棒性。
其他文献
一、前言在社会生活中性别角色都是由一种传统文化观念加以限定的。与性别相联系的文化传统随着群体的不同和时间的推移不断发生着变化。社会生活中既存在强化和维系性别角
教师增值性评价是一种起源于英美、目前已在一些国家和地区应用的教师评价新模式。这种评价模式借助统计模型,将教师对学生成绩进步的单独贡献分离出来,更加公平、精确,具有
目前,我国政府网站信息公开服务主要存在的问题有:政府信息公开目录体系不完善;信息条目和信息目录规范性差,必选元数据项不全;政务公开与信息公开概念相模糊,两者信息内容重
目的:对中药口崩片体外崩解时间测定方法进行研究,筛选重现性、分辨率、体内外相关性好的评价方法。方法:采用自制和常用方法测定实验样品(空白和中药口崩片)的体外崩解时间,
目的:研究颈动脉硬化与估测肾小球滤过率(estimated glomerular filtration rate,eGFR)在高血压人群中的相关性。方法:随机选取2 809例高血压患者作为研究对象,以颈动脉内中
目的构建医院绩效评价指标体系,为使军队医院适应新医改要求、合理配置医疗资源、提升整体绩效提供理论支持。方法从现状出发,基于平衡计分卡(BSC)思想,结合医院整体运营管理
随着计算机基础课程改革的深入开展,对大学生进行"面向应用、突出实践"的信息素养的培养已成为高等学校计算机基础教学的新的目标,然而通过调查研究发现教学资源的建设成为制
高等教育发展中的结构性矛盾和社会发展现实需要,迫切需要高校推进精细化管理,建立现代大学制度,实施高等教育质量工程。本文分析了精细化管理由企业实施到学校推行的可行性,
目的:评价近端胃切除术和全胃切除术治疗胃底贲门癌的价值。方法:收集公开发表的近端胃切除术和全胃切除术治疗胃底贲门癌的中文和外文文献,将文献中提取的数据按照其对应的
语文是母语教育课程,学习的资源和实践机会无处不在,无时不有,应该让学生更多地直接接触语文材料,在大量的语文实践中掌握运用语文的规律。要提高高职语文教学质量,发挥其应