基于并行分支和上下文聚合网络的单幅图像去雨算法研究

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:happysanban
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
雨天拍摄的图像由于雨痕或者雨雾的遮挡,容易造成图像成像质量的退化,导致图像中大量背景细节信息丢失和模糊,严重影响计算机视觉算法的精度。目前,从有雨图像中分离出干净无雨的背景层,主要采用基于图像先验的传统算法和卷积神经网络算法两个方向。然而,传统去雨算法无法处理场景复杂、雨痕分布不规则的有雨图像,并且耗费大量的人工成本。卷积神经网络算法缺乏考虑增加网络的深度容易造成梯度消失,雨条纹具有不同尺度、方向和密度,以及如何有效地去除雨条纹的同时保护背景细节纹理和色彩一致性。为了解决上述问题,本文主要贡献如下:首先,为了平衡网络深度和去雨性能之间的关系,本文提出了基于并行分支残差叠加网络的单幅图像去雨算法。该网络将两个不同功能的分支进行并联,增加网络的宽度从而降低网络的深度。上层分支使用多尺度残差块组成的多尺度雨痕提取块,从有雨图像中提取不同密度、大小和方向的雨条纹。下层分支利用空洞卷积注意力残差块扩大网络的感受野,在不增加网络深度的情况下获取更多的上下文信息,并且对雨痕特征进行筛选。最后融合两个并行分支提取的特征,并与输入图像建立全局残差连接,使得整个网络只提取雨痕特征从而保护背景的完整性。在合成数据集和真实世界数据集上的定量和定性对比实验,证明了并行分支残差叠加网络能够有效地去除雨条纹,并且网络参数较少、时间复杂度较低。其次,为了解决使用池化操作获取多尺度雨条纹特征时,容易造成信息丢失的问题,本文提出了基于多分辨率上下文聚合网络的单幅图像去雨算法,主要由上下文聚合子网络和全分辨率子网络组成。上下文聚合子网络使用反混洗操作代替池化操作,对输入图像进行多次下采样从而获得多空间分辨率特征图,并将低分辨率层提取的特征自上而下地融入高分辨率层中,引导网络从不同分辨率特征中提取多尺度雨痕信息。全分辨率子网络融合和处理上下文聚合子网络提取的多尺度雨痕特征,并使用多分辨率特征增强块提高图像在不同分辨率下的细节信息。此外,使用局部残差密集连接块和通道注意力机制增强网络提取特征的能力和速率。通过大量的对比实验证明,多分辨率上下文聚合网络取得了最高的评价指标和最优的视觉效果,能够有效地保护背景纹理和色彩亮度。
其他文献
近年来,由于压电传感器具有质量轻、体积小、抗干扰能力强等优点而被广泛应用于交通运输、智能结构和航空航天领域。特别是基于压电阵列的噪声与振动主动控制技术和结构健康检测技术逐渐成为国内外学者广泛研究的热点问题。其中,将压电模态传感器作为误差传感器的振动主动控制系统不仅可降低控制器的设计难度和工作量,还能有效避免控制溢出。阵列式压电模态传感器的设计也是国内外学者关注的重点问题。本课题以压电陶瓷(PZT)
学位
生物流体力学研究生物心血管系统、消化呼吸系统、内分泌以及游泳、飞行等与水动力学、空气动力学、边界层理论和流变学有关的力学问题。浸入边界方法(IBM)是近年来为解决生物流动力学问题而迅速发展的重要、有效的方法,在动脉和人工心脏瓣膜中的血液流动、飞行和游泳等涉及复杂几何形状和无规律的较大变形的流固耦合问题中得到了广泛的应用,其核心思想是利用外加的等效体积力代替浸入物体边界对流场的作用力。该方法能够在界
学位
纯音噪声是一种典型的气动噪声,比背景宽频噪声声压级大20-30d B,其常会出现在中等雷诺数(10~4≤≤10~6)层流翼型设备中,如小型无人飞行器、微小型风力机等。纯音噪声现象及其形成机理十分复杂,目前还需要进一步理解和研究,涉及到翼型边界层流动分离和再附的复杂流动过程、以及声涡非线性的相互作用等复杂的物理过程。因此研究中等雷诺数层流翼型纯音噪声声源特性,对了解纯音噪声生成机理和抑制噪声有重要意
学位
减少飞行颠簸、保持机身稳定,无论是对于提高载人飞机的舒适性还是无人机的作业稳定性都是很有必要的。当空速变化时,传统机翼升力必将随之变化而导致升降变化,而且由于其与机身是刚性连接,必然带动机身跟随上下俯仰变化,给乘坐舒适和作业稳定性带来影响。为此,有必要继续积极探寻减少颠簸、保持机身飞行稳定的技术方案。在广泛查阅国内外相关文献资料、对比分析研究各类飞行器设计特点的基础上,本文创新性的提出了一种通过跟
学位
微型轴流涡轮作为微型涡喷发动机的核心部件,其流通能力强、高能量密度及结构相对简单等优点,被广泛应用于航空、军舰等领域。由于微型轴流涡轮在高压、高温等恶劣工况中高效运行,其气动性能直接影响到整个发动机的动力性能,因此对微型涡轮的气动设计及气动性能优化是研究重点。本文根据某微型涡喷发动机的涡轮总体设计指标完成了微型轴流涡轮的气动设计,并应用数值模拟及理论分析相结合的方法,深入研究了静子根部弯曲及非轴对
学位
无人机近些年发展迅猛,以其隐蔽能力、生存能力、造价低廉、不惧伤亡的特点受到了军事和边境的青睐。被广泛应用于提供情报,监视,目标获取和侦察等任务,除此之外,无人机也在建筑,基础设施和农业等其他飞行任务中获得了大量的运用。本课题系江西省中等航时无人机技术和设备开发创新能力建设项目(235000232080),论文将针对项目中研制的G15长航时无人巡防机,设计相应的无人机发射和回收系统。根据G15无人机
学位
近年来,飞机数字化装配技术发展迅速,主要有并行产品数字化定义与数据管理、装配工艺规划与仿真、可视化文件的编写等技术,若将其应用到航空发动机的传统装配中,可以提前发现并改进装配工艺存在的问题、有效缩短制造周期与提高工人的装配效率。为此本文开展了基于模型定义的航空发动机装配仿真技术的研究,其包括MBD技术、虚拟装配仿真技术与三维工艺可视化技术,为现代航空发动机数字化装配方向提供一些新的理论参考和思路。
学位
以螺旋桨为推进装置的高空长航时无人机高速前飞时,桨叶的桨尖区域受空气压缩效应影响严重,另外,低雷诺数环境下桨叶表面易产生分离泡,使螺旋桨气动性能受到很大影响。为了改善螺旋桨在低雷诺数下的气动性能,本文从减弱桨尖压缩效应的影响和改善桨叶表面气流流动状况两方面出发,分别提出了对原始桨叶的桨尖区域进行不同角度切角和在桨叶表面加装涡流发生器两种设计方案。论文主要工作内容如下:首先,选取合适的高空螺旋桨,根
学位
图像风格迁移是指在保持图像内容不变的情况下,将图像的风格转换为另一种风格。近些年发现深度学习在风格迁移任务上取得了良好的效果。与传统风格迁移方法相比,深度神经网络可以避免对每种风格均需进行特征设计的问题。在对风格迁移的研究过程中,出现了生成图像的内容丢失、转换的风格不够充分和生成的图像会出现伪影等问题。本文针对这些问题展开研究,主要内容如下:(1)大多数现有风格迁移方法生成的图像存在产生伪影和丢失
学位
在航空发动机工作的过程中,涡轮盘有时可能会发生超转现象,此时涡轮盘的实际转速超过了最大工作转速,轮盘可能发生破裂。因此,能够准确预测轮盘的破裂转速具有十分重要的意义。另外,在保证轮盘的安全性的前提下,可以对涡轮盘进行结构优化,以寻求更合理的应力分布和更低的重量。本文针对航空发动机涡轮盘的强度问题,利用有限元仿真分析,开展了轮盘破裂转速预测方法的研究。论文主要的工作和结论如下:1.对某发动机涡轮盘进
学位