考虑人脸特征的图像情感迁移技术研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:tu139201103
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
情感迁移旨在对源图像的情感进行改变。现有的方法存在一些问题。一方面这些方法没有考虑人脸特征对情感表达的影响。这将导致对目标图像的不正确的情感评估,从而造成情感迁移结果与目标图像的情感不一致。另一方面,现有的方法只是对图像的颜色分布进行迁移,并没有改变图像的形状特征。为了解决上述问题,本文重点研究了基于深度学习的图像情感迁移方法。首先,本文提出了一种基于卷积神经网络的人脸图像情感迁移方法。该方法考虑了目标图像中的人脸特征,建立了一个更精确的情感分类网络,对人脸情感特征进行分析。为了获得更加符合人的感知的结果,本文建立了一个新的人脸情感数据库,该数据库中包含图像的情感分布,从而能够符合图像和情感一对多的特点。为了能够更好地迁移图像的情感分布,本文提出了一个预训练情感网络。该网络结合了局部和全局特征网络,能够更好地学习图像的细节信息。最后,通过对现有的数据集进行训练来获得图像的情感颜色特征。该方法不仅使结果图像的情感与目标图像的情感更一致,而且能够保证图像的梯度和自然性。此外,本文还提出了一种新的基于生成对抗网络的人脸图像情感迁移方法。该方法可以直接改变人脸的形状特征。该网络包括两个生成对抗网络,构成一个环形网络。两个网络包含两个生成器和鉴别器,彼此之间的信息通过循环一致性损失函数进行共享。这样使得生成器所生成的图像与真实图像更加接近,细节保持的更加完整。另外,本文添加了人脸约束损失函数,从而保持人脸的轮廓不会有大的改变。这样既考虑了人脸的整体轮廓特征,也考虑了图像的细节特征。不仅如此,为了满足实验的要求,本文对现有的数据集进行了改进,分成六类子集进行训练。实验结果证明,本文的方法在细节性保持和整体性保持方面都优于现有方法。
其他文献
近些年来,中国汽车行业的迅速发展得力于人们生活水平的大幅度提高。同时国内GDP的迅速增长以及国内城镇化进程的加快为汽车行业带来新机遇的同时推动了我国汽车行业的迅速发
随着风能、太阳能等清洁能源的开发利用,柔性直流输电技术因其可有效解决远距离、大容量等输电问题而引起关注。而模块化多电平换流器(Modular Multilevel Converter,MMC)具
随着高速铁路的迅速发展和运行速度的不断提高,高速列车空气动力学性能和运行安全性日益成为不可忽视的焦点问题。我国幅员辽阔、气候复杂多变,高速列车运行时容易遭遇诸如强
人们在采集数据的同时难免会由于设备中断,设备损坏等原因导致数据缺失的现象,为了充分利用数据的有效信息,数据填充问题也渐渐成为计算机视觉、机器学习等领域的焦点。但随
应对气候变化已经是21世纪我们面临的共同难题,而新能源的应用是我们缓解与自然矛盾的重要措施。风能易获得且我国的风能总储量巨大,列世界第三位,且风力发电无污染,投资小,
有别于陆地桥梁,跨海桥梁所处的海域环境更为复杂。伴随跨海桥梁数量的快速增长及其震害的相继出现,跨海桥梁抗震性能与地震安全已被广泛关注。本文以跨海桥梁常用的隔震连续
根是使植物固着于土壤里的关键器官,植物借助根从土壤里吸收生命活动所必需的水分及营养物质。侧根是根系结构的重要组成部分,是从已发育完全的根组织中分化形成的根,往往循
近年来,深度学习通过提取深层特征极大地提升了网络的认知能力,在高光谱图像的特征提取和分类领域中得到了成功的应用。然而,在高光谱图像目标检测领域中,先验目标光谱信息非
黄土丘陵沟壑区降雨集中且多为暴雨,暴雨所形成的坡面径流是造成黄土丘陵严重水土流失的主要原因,而草地植被对坡面径流有良好的抑制作用,草地植被能够通过改变坡面下垫面条
银行卡平台是一种特殊的支付双边市场,会员银行两端分别连接着消费者和商户。与一般性双边平台相似的是,银行卡平台希望有更多的消费者和商户加入和使用。而银行卡平台与一般性双边平台不同的是,它是由消费者、商户、发卡银行和收单银行等更多参与主体组成的双边市场。在消费者与商户进行交易的同时,收单银行还需要向发卡银行支付一定的“交换费”,用于弥补发卡银行市场拓展的成本及支付给卡联盟的网络运行费等。近年来,随着中