深度生成算法及其在书画风格迁移中的应用

来源 :南京大学 | 被引量 : 2次 | 上传用户:tpsundl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像处理技术因深度学习的发展取得了革命性的进步,尤其在分类与识别领域,其表现已经接近甚至超越人类。然而这些成果主要体现在模式识别领域的成功,离真正的人工智能还任重而道远。深度生成模型因其对数据强大的建模能力具有广泛的应用前景。本文以深度网络生成模型研究中的两个应用——单样本的绘画风格迁移和多样本的书法字体生成为驱动,针对基于对抗生成和基于判别生成两种生成模型算法进行了较为深入的探讨和研究,提出了相应的改进方法。改进了现有绘画风格迁移的效果,实现了书法字体的生成,尤其实现了名家行楷书体的生成。本文的研究内容和创新点具体如下:(1)单样本风格学习——绘画风格迁移部分研究内容及创新点。提出了一种改善单样本风格学习效果的折线学习方法,具体阐述了基于样本的折线学习和基于损失函数折线学习的工作机制。对比原绘画风格迁移算法,在风格图与内容图的内容迥异的情况下,改进后的方法降低了结构信息重建偏差,改善了低纹理、无纹理区域的生成图的伪影效应。最后给出了一种可以定量评价图像风格迁移效果的评价方法。(2)多样本风格学习——书法风格迁移部分研究内容及创新点。提出了一种类比主动形状模型的深度生成网络及其训练方法,并将该方法应用于中国汉字书法的风格转换上,改善了生成式对抗网络难于收敛、难于训练的问题。提出一种风格嵌入编码技术对不同书写风格进行编码,提升网络泛化能力,实现网络同时对多种风格的学习。引入多径判别网络对目标函数进行多种正则处理,实现了像素级别精度的风格迁移,让网络在确保汉字书写正确的前提下,实现对大师书法风格的模仿。(3)基于神经节分化的判别网络增量学习部分研究内容及创新点。针对上一章主动形状生成模型中判别网络在遇到新字体学习时需要重头训练的问题,本章提出一种基于神经节分化的判别网络增量学习方法,在判别网络中加入“聚类层”和“分化层”,以自组织的方式对输入类别进行增量学习,通过部分网络结构和参数共享实现对已有知识的记忆和新知识的再学习。本文在公共分类数据集上验证了该方法在同等网络规模下具有更高的分类准确率,并测试了其在新字体上的学习效果,在同等收敛条件下所述算法具有更少的时间代价。
其他文献
Nur77(也叫TR3和NGFIB)是核受体超家族的重要成员的之一,在调控肿瘤细胞的生存与凋亡中起着双重作用,是抗肿瘤药物开发的重要靶点。Bcl-2家族蛋白成员在肿瘤的发生、转移和耐
随着我国人民消费水平的提高,邮轮旅游作为一种新兴旅游方式得到了迅速发展,对我国旅游经济的发展和海上运输业的发展起着重要的推动作用。但随着邮轮旅游市场的不断扩大,邮
研究背景卵巢癌是一个由不同临床病理和分子特征的异质性卵巢肿瘤组成的集合。在全球范围内,卵巢癌都是最致命的妇科恶性肿瘤。尽管有不少研究者对新型化学疗法、靶向疗法和
伴随着大数据时代的到来,数据量正呈现指数级增长,与此同时所带来的在数据分析和挖掘等方面的需求也不断激增,而聚类分析作为数据挖掘的重要工具,其研究热度一直很高,但是每
目的:研究表明过长或过短的睡眠时长均会引起全因死亡风险的增加。但行为危险因素和健康状况是否影响以及如何影响睡眠时长与全因死亡的关系,睡眠时长如何促进全因死亡风险的
声子晶体,基于其展现出的超常弹性波操控性能和丰富的动力学行为,正在基础物理研究与工程应用探索等方向蓬勃发展。例如,声子晶体所具有的弹性波带隙、局域缺陷态与负折射率
无论是要解决器件散热问题,还是要更好地设计热功能材料,都需要对纳米尺度导热规律有更深入的了解。纳米结构特征尺寸与平均自由程相当,此时傅里叶导热定律不再适用,热量以弹
高精度室内定位是众多领域的共性研究问题。本文将室内定位从实现机制上分为主动式与被动式定位,针对主被动定位各自的优缺点,本文拟选择智能手机惯性数据与普通单目监控视频
合约是双方合意的表示,能够促进合作剩余的产生,而合约形式选择能够对合作剩余的分配、双方预期与权益保障产生深刻影响。随着土地流转规模日益扩大,加强农户的土地流转合约
随着智能时代的到来,情感识别任务成为众多学者研究的热点问题之一。研究情感识别不仅能够优化人机交互的体验,而且在个性化推荐、健康监督、交互式游戏等等方面具有广泛的应