基于注意力特征融合的图像风格迁移研究

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:bingdaogege
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像风格迁移是指在保持图像内容不变的情况下,将图像的风格转换为另一种风格。近些年发现深度学习在风格迁移任务上取得了良好的效果。与传统风格迁移方法相比,深度神经网络可以避免对每种风格均需进行特征设计的问题。在对风格迁移的研究过程中,出现了生成图像的内容丢失、转换的风格不够充分和生成的图像会出现伪影等问题。本文针对这些问题展开研究,主要内容如下:(1)大多数现有风格迁移方法生成的图像存在产生伪影和丢失背景信息的问题,针对这个问题提出一种新的网络架构SDC-GAN,该网络架构是使用特征共享和特征解耦的方法进行图像的风格迁移。SDC-GAN网络架构中有两个GAN网络模块,第一个GAN网络的内容图像作为第二个GAN网络的风格图像,反过来也是如此,SDC-GAN对内容图像和风格图像同时提取特征,通过交叉的方式输入到GAN网络模块中。根据SDC-GAN特有的结构性质,对图像的重构损失和循环一致性损失进行了改进。在感知层上改进了风格重构损失和内容重构损失,使图像细节更加逼真。通过改进了循环一致性损失,有效避免了过拟合现象。通过重利用编码器,减少了参数规模,使模型结构更加紧凑,训练速度更快。(2)提出了一个自注意力多模态风格迁移网络SAM-GAN,不但实现了多个域之间的风格转换,而且使生成同一风格的图像具有多样性,避免了生成图像比较单一的问题。在SAM-GAN网络的生成器模块中,使用自注意力机制将局部特征与全局特征进行联合学习,使生成的目标风格图像局部位置可以与图像的全局相协调,从而提高了生成图像的质量。SAM-GAN网络中的风格映射网络模块可以使同一种风格的不同图像映射到同一流形空间中,从而产生同一种风格的不同特征隐藏编码。将得到的风格隐藏编码与内容图像同时输入到SAM-GAN网络中的生成器模块中,对生成的同一目标风格图像定义一个Style Diversification Loss,使SAM-GAN网络生成同一种风格的图像具有多样性。另外,在此模型中舍弃了循环一致性的强约束性,引入了对比学习的机制,使生成的目标风格图像更加灵活多样。
其他文献
高超声速飞行器技术已成为航天航空强国研究热点,而复杂外形高超声速飞行器表面热流数值模拟预估精度是制约高超声速飞行器研制的核心问题之一。表面热流预估精度受网格、数值离散方法等因素影响,而网格尺度选取存在一定的不确定性,因此本文提出了一种网格划分方法,并通过数值模拟进行验证该方法的适用性。首先,对高超声速钝头体层流绕流的数值模拟,应用理论分析及数值模拟方法,提出了一种基于壁面网格雷诺数及基于钝体特征长
学位
降低结构重量一直是飞机设计中追求的重要目标。因此,对起落架系统中的结构进行优化从而降低冗余重量就变得非常重要。轻量化设计一般分为两类,一是采用更轻质的复合材料进行结构制造,二是对力学结构进行优化设计。本文便是从第二个角度出发,将一种数学领域中的曲面,三周期极小曲面应用在结构优化设计中,为解决工程问题提供新的方向。本文以起落架中的斜撑杆作为研究对象,建立了撑杆的三维模型,分析其实际工况,并简化为受压
学位
近年来,由于压电传感器具有质量轻、体积小、抗干扰能力强等优点而被广泛应用于交通运输、智能结构和航空航天领域。特别是基于压电阵列的噪声与振动主动控制技术和结构健康检测技术逐渐成为国内外学者广泛研究的热点问题。其中,将压电模态传感器作为误差传感器的振动主动控制系统不仅可降低控制器的设计难度和工作量,还能有效避免控制溢出。阵列式压电模态传感器的设计也是国内外学者关注的重点问题。本课题以压电陶瓷(PZT)
学位
生物流体力学研究生物心血管系统、消化呼吸系统、内分泌以及游泳、飞行等与水动力学、空气动力学、边界层理论和流变学有关的力学问题。浸入边界方法(IBM)是近年来为解决生物流动力学问题而迅速发展的重要、有效的方法,在动脉和人工心脏瓣膜中的血液流动、飞行和游泳等涉及复杂几何形状和无规律的较大变形的流固耦合问题中得到了广泛的应用,其核心思想是利用外加的等效体积力代替浸入物体边界对流场的作用力。该方法能够在界
学位
纯音噪声是一种典型的气动噪声,比背景宽频噪声声压级大20-30d B,其常会出现在中等雷诺数(10~4≤≤10~6)层流翼型设备中,如小型无人飞行器、微小型风力机等。纯音噪声现象及其形成机理十分复杂,目前还需要进一步理解和研究,涉及到翼型边界层流动分离和再附的复杂流动过程、以及声涡非线性的相互作用等复杂的物理过程。因此研究中等雷诺数层流翼型纯音噪声声源特性,对了解纯音噪声生成机理和抑制噪声有重要意
学位
减少飞行颠簸、保持机身稳定,无论是对于提高载人飞机的舒适性还是无人机的作业稳定性都是很有必要的。当空速变化时,传统机翼升力必将随之变化而导致升降变化,而且由于其与机身是刚性连接,必然带动机身跟随上下俯仰变化,给乘坐舒适和作业稳定性带来影响。为此,有必要继续积极探寻减少颠簸、保持机身飞行稳定的技术方案。在广泛查阅国内外相关文献资料、对比分析研究各类飞行器设计特点的基础上,本文创新性的提出了一种通过跟
学位
微型轴流涡轮作为微型涡喷发动机的核心部件,其流通能力强、高能量密度及结构相对简单等优点,被广泛应用于航空、军舰等领域。由于微型轴流涡轮在高压、高温等恶劣工况中高效运行,其气动性能直接影响到整个发动机的动力性能,因此对微型涡轮的气动设计及气动性能优化是研究重点。本文根据某微型涡喷发动机的涡轮总体设计指标完成了微型轴流涡轮的气动设计,并应用数值模拟及理论分析相结合的方法,深入研究了静子根部弯曲及非轴对
学位
无人机近些年发展迅猛,以其隐蔽能力、生存能力、造价低廉、不惧伤亡的特点受到了军事和边境的青睐。被广泛应用于提供情报,监视,目标获取和侦察等任务,除此之外,无人机也在建筑,基础设施和农业等其他飞行任务中获得了大量的运用。本课题系江西省中等航时无人机技术和设备开发创新能力建设项目(235000232080),论文将针对项目中研制的G15长航时无人巡防机,设计相应的无人机发射和回收系统。根据G15无人机
学位
近年来,飞机数字化装配技术发展迅速,主要有并行产品数字化定义与数据管理、装配工艺规划与仿真、可视化文件的编写等技术,若将其应用到航空发动机的传统装配中,可以提前发现并改进装配工艺存在的问题、有效缩短制造周期与提高工人的装配效率。为此本文开展了基于模型定义的航空发动机装配仿真技术的研究,其包括MBD技术、虚拟装配仿真技术与三维工艺可视化技术,为现代航空发动机数字化装配方向提供一些新的理论参考和思路。
学位
以螺旋桨为推进装置的高空长航时无人机高速前飞时,桨叶的桨尖区域受空气压缩效应影响严重,另外,低雷诺数环境下桨叶表面易产生分离泡,使螺旋桨气动性能受到很大影响。为了改善螺旋桨在低雷诺数下的气动性能,本文从减弱桨尖压缩效应的影响和改善桨叶表面气流流动状况两方面出发,分别提出了对原始桨叶的桨尖区域进行不同角度切角和在桨叶表面加装涡流发生器两种设计方案。论文主要工作内容如下:首先,选取合适的高空螺旋桨,根
学位