基于卷积神经网络的图像风格中国化迁移

来源 :西安石油大学 | 被引量 : 0次 | 上传用户:robbieqzl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像风格迁移是指利用合适的算法学习一种图像的风格,然后将学习到的风格应用到另一种图像上的技术。随着卷积神经网络推动下的突破性进展,该技术被逐步应用于影视制作等各大行业,具有很高的商业和艺术价值。在绘画风格迁移领域,已有的风格迁移算法多是针对西方油画,缺乏其在传统国画上的应用。本文以国画风格的迁移为研究对象,用传统国画代替西方油画作为风格图像,用自然景观照片作为内容图像,旨在通过基于卷积神经网络的快速风格迁移算法,生成出具有国画艺术风格的自然景观图像,同时解决风格化图像的生成质量和速度的问题,主要工作包括:(1)研究了图像大小对风格迁移效果的影响。选择两种不同大小的图像依次对转换网络进行不同次数的训练。实验表明:从视觉上看,相比于大小为256×256的图像训练近10万次后的模型生成的风格化图像,大小为640×400的图像训练近4万次后的模型生成的风格化图像质量要好得多,图像内容更加清晰;从总损失图像上看,大小为256×256的图像在训练近10万次后的总损失依旧高于640×400的图片在迭代近4万次后的总损失。因此后续在对图像转换网络训练时数据集的大小均设为640×400,迭代次数设为4万次。训练次数的不同是因为,图像的缩小会使特征提取不够充分,从而导致总损失的增大,只能通过训练次数的增加来尽可能减小总损失。(2)验证了内容与风格权重比对风格化图像的影响。在3×10-2、1×10-3、1×10-4和5×10-4四种权重比下,对两种不同的国画风格进行训练并生成相应的风格化图像,并从多个角度对结果进行分析。实验表明:每一种风格都有其最合适的权重比。颜色对比较深的风格下确定出的最好权重比5×10-4并不适用于颜色较浅的风格,颜色较浅的风格下确定出的最好权重比为1×10-3;当权重比小于3×10-2时,生成的风格化图像效果明显。(3)提出具有新型编码-解码-编码残差结构的图像转换网络改进。由于传统快速风格迁移算法的转换网络残差块结构不够简洁,存在参数量庞大等问题,影响了其转换的速度。本文通过添加合适的编码—解码—编码结构设计出新的残差块,减少了所含参数,改善了图像转换网络。实验表明:在训练阶段,当迭代近4万次时,改进后的转换网络所需时间相较于改进前减少了35分钟;在生成阶段,改进网络生成图像的时间相较于改进前平均减少了10.4%;网络结构的改变不影响风格化图像的质量。(4)基于连接块添加的国画风格迁移网络损失函数构建。针对用墨淡雅、颜色对比较浅的风格图像迁移效果往往不够明显、轮廓不够清晰等质量问题,在原快速风格迁移网络基础上加入一个连接块,并以此构建出新的损失函数。实验表明:从视觉上看,新生成的图像不仅修复了风格化效果的缺失,而且消除了边界连接处的“叠影”,使得图像效果整体变好,边界连接更加清晰;从显著性检测结果上看,新生成的风格化图像内容更加清晰,结构更加完整连贯;从总损失图像上看,使用新的损失函数对转换网络训练近4万次后,总损失值下降,图像的震荡幅度减小,收敛提前。
其他文献
近年航空领域流量成倍增长,为了保证飞行目标在飞行过程中的飞行安全,需要对飞行目标异常行为状态进行实时监控和分析,并通过飞行目标异常行为分析系统辅助操作员对飞行目标进行管理和监测。本课题主要研究内容包含异常行为分析算法和飞行目标异常行为分析系统实现两部分。在异常行为分析算法方面,传统MDLOF异常行为检测算法依赖于近邻参数k,会造成飞行目标异常行为检测准确率较低的问题,且MDLOF算法不能对异常行为
学位
随着无人机技术的广泛应用,其安全着陆被越来越多的学者关注,无人机着陆中首要的任务是准确识别着陆跑道线,这成为了近年来研究的热点方向和急需解决的难题。目前无人机视觉着陆主要分为两种方法,一种方法是利用图像处理技术和着陆标识物进行算法设计,但该方法的着陆标识物在真实场景中容易受到光照变化、遮挡等情况以及需要人工设计特征提取器和手动调整各种参数,算法的泛化性能很难保证;另一种方法是利用深度学习检测算法代
学位
公路的路面在日常生活中易于受到车辆和环境因素的影响,从而道路表面会出现各种路面病害,这些路面病害会导致公路的承载性能下降,甚至会严重影响公共交通安全,给人们的安全出行埋下隐患。为此,公路管护部门定期开展路面病害检测工作,尤其需要对路面裂缝这类病害进行检测。本文将深度学习理论引入到路面裂缝检测中,以路面裂缝为研究对象,建立了较为完备的基于深度学习的路面裂缝检测方案,确定了以目标检测技术和图像分割技术
学位
随着经济及路由建设的飞速发展,安置在道路上的监控设施不断增加,带来了海量的交通视频数据。这些数据根本无法完全通过人工手段进行处理,因此,亟需开发出高度可靠并值得信赖的智能化算法来实现这些监控视频数据的处理。车辆目标检测是交通监控系统中至关重要的一环,是诸如车辆计数,事故检测等一系列后续处理的基础。本文在对现有车辆目标检测算法进行调研及比较的基础上,通过检测精度与速度的权衡,选择了YOLOv3-ti
学位
在大数据技术日益发展成熟的背景下,互联网产生的庞大数据不利于人们高效率识别其中存在的有效信息,数据挖掘可以对海量数据进行分析,从而获得数据中对人们有价值的部分。决策树算法在数据挖掘领域中应用广泛,但是当数据中存在模糊性等不确定性信息且标签具有层次结构时,现有的决策树算法首先难以处理数据中的不确定性信息,其次在处理层次分类中标签具有层次结构的数据时,一般选取层次结构的某一层标签去分类数据,这会导致当
学位
学历信息是当今社会用来认证人才的重要依据,但国内外学历造假事件屡禁不止,影响了高等学历制度的公平性。目前学历认证方式存储数据过于集中化,易出现数据篡改问题。而区块链技术具有去中心化、不可篡改等特性,其中共识机制能够保证系统的一致性与有效性,也是区块链技术研究的重要内容。对于常用的PBFT共识机制,存在主节点选取简单、对恶意节点不惩罚、共识效率较低的问题,这影响了区块链应用的落地。为此,本文针对PB
学位
经典粗糙集模型是一种处理不精确、不完备数据的有效数学工具,其重要应用之一就是属性约简,也称特征选择。然而经典粗糙集模型在处理数据时具有局限性,对于数值数据,需要先将数据离散化,这样便有可能导致信息的丢失,模糊粗糙集在此方面有独特的优势。此外,在大数据时代,数据往往呈现出动态变化的趋势,仅仅只有静态的特征选择算法无法满足现实世界的需求,且现有的基于模糊粗糙集模型的特征选择算法大多都是从属性集的角度出
学位
视频测井是目前油田采用的油气测井的一种重要方式。但是由于井下存在高压、高温的泥浆和油气混合液等因素,使得油气井的井下工作状况十分复杂和恶劣。在进行油气井的视频测井作业时,获取的测井图像质量下降,颜色失真。在诸多影响因素中,最突出的情况就是图像的去水雾问题。所以,对测井有雾视频图像进行去雾处理具有非常重要的意义和应用价值。本文作者基于大气图像的去水雾暗通道算法,针对测井视频图像存在的水雾问题,从图像
学位
报纸
随着钻井工程的生产规模不断扩大,批量钻井模式在油气藏开发中得到广泛应用。井眼轨迹的优化设计是钻井技术的核心问题,直接关系到油田的经济效益。本文根据钻井现场的实际情况,对井口-靶点分配、井眼轨迹优化设计、井眼轨迹可视化等方面进行研究。首先,对于井口-靶点的分配问题,以“各井之间轨迹不相交且单井水平位移和最小”为目标建立约束模型,优选出最佳的井口和靶点对应关系,既能保证单井轨迹最短,又避免了各井之间的
学位