基于对抗学习的图像转换算法研究

来源 :浙江师范大学 | 被引量 : 0次 | 上传用户:tan123456654
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像转换是图像生成领域中一个热们的研究方向,在现实世界中有很多实际的应用,它通过改变其原图特征转化为不同的图像,例如图像风格转换、图像修复、图像上色、图像的超分辨等。随着近些年生成对抗网络的快速发展,其在图像生成领域具有强大的表现力,因此将生成对抗网络应用到图像转换领域已经成为一种趋势。经过了前人不断地研究,图像转换的质量已经有较为明显的提升,但是面对一些复杂的图像时,转换后的真实性、清晰程度、多样性以及转换程度等方面的表现还有提升的空间,对图像转换后图像的效果也是一个巨大的挑战。本文针对转换后的图像在局部不清晰、转换效果不明显等问题,设计了新的图像转换的网络架构,通过改进生成对抗网络的生成器和判别器从而提升清晰度和转换的效果。首先,本文介绍了生成对抗网络和图像转换的研究意义和研究背景,梳理了国内外的对于生成对抗网络和图像转换领域的研究状况,将其中有研究价值的部分进行了挖掘和改进。对生成对抗网络和图像转换方法进行了总结,归纳了近年来生成对抗网络的发展和图像转换领域的相关网络模型,并且总结了现有模型的优缺点。其次,在现有图像转换模型上对生成器和判别器进行改进,提出了一种新的基于对抗网络的图像转换模型。本文在生成器中利用变分自编码器,更加易于将两个不同数据集图像编码到同一个高维语义隐空间,从而提升内容的相似度。通过融合局部和全局判别器,在图像的局部区域和全局区域都得到了更好的判别效果。通过与现有多个方法的对比实验,证明了本文方法在图像转换后的质量上更优越。此外,本文提出在生成器中融合非对称卷积模块,改善编码过程中特征提取,在判别器中融合多尺度特征图,增强对前层特征图信息的判别作用,通过实验对比发现,图像转换后效果有一定的提升。本文实验主要是在Facades、Edges2shoes、Maps等数据集中进行训练和测试的,通过对比多个数据集的转换效果,本文所提出的方法在图像的整体转换效果以及细节方面都有着较好的效果。
其他文献
在“工业4.0”和“中国制造2025”双重社会背景下,制造业成为立国之本、兴国之器、强国之基。虽然串联机器人操作臂在制造业领域里已经得到广泛的作用,但是传统串联操作臂的
本次研究以S1612块蒸汽吞吐前期地质认识为基础,针对目前区块存在的油水关系认识不清、蒸汽吞吐效果差及动用程度不均等开发难题,开展蒸汽吞吐开发效果评价,明确吞吐平面、纵
生成对抗网络(GAN)自2014年提出以来受到各国学者的广泛研究,图像合成是其最成功的应用领域之一。尽管生成对抗网络在图像合成任务中比传统方法更高效,但是它也存在一些不足,
现今许多领域都将人脸识别作为身份验证、人员查找以及人流量统计等的重要手段,在车站、机场、售票窗口和繁华街道等诸多场景中都会安装摄像头来监控和识别人脸。而实现智能
水凝胶是一种亲水聚合物的交联网络,它能够保留大量的水分而保持自身三维结构不溶解。自从十九世纪50年代早期维赫莱特和他的同事将水凝胶应用在生物医药领域后,水凝胶吸引了
近年来,随着社会经济的快速发展,越来越多的污染物进入水环境中,造成了严重的水污染。沉积物是水环境的重要组成部分,明确其中污染物的毒性,对于准确开展水环境风险评估至关
随着计算机技术和软件工程的发展,各种网络互联的智能化装备已经全面应用于我们生活的方方面面,对这些装备的控制管理、协商与协作始终是计算机领域和控制领域的研究热点。目
深度领域适应属于深度迁移学习的一部分,主要用来解决标注数据不足的问题,是一种比较前沿的机器学习方法。传统迁移学习,通过共享特征子空间或浅层表示调整源域实例权重等手
剩余污泥的处理与处置成为当今制约市政污水处理产业健康发展的瓶颈。利用高含固厌氧消化技术对剩余污泥进行处理具有环境友好且可持续的优势而逐渐受到重视。目前,对污泥厌
稀土氟化物具有宽光谱窗口和高带隙的特性,可以使掺杂离子发生电子跃迁并且避免自我吸收,并且它的低声子能的特性可以有效减少激发能级的能量淬灭,这些优异的光学特性可以延