基于形状注意力的图像去雨雪技术研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:boymy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
雨雪是我国常见的天气现象。在雨雪天气下拍摄户外景象时,雨滴或雪花的干扰容易在拍摄图像上造成遮挡效果,显著降低图像的能见度,为后续处理和识别过程带来负面的影响。图像去雨/雪的任务是去除图像中的雨/雪造成的遮挡效应,还原出原有的清晰图像,使观察者能看清图像的具体细节。本文针对图像去雨滴和图像去雪花两个任务进行了研究,前者旨在移除透过带雨滴玻璃进行拍摄时所得图像中的雨滴遮挡效应,后者旨在去除在下雪天所拍摄图像中的雪花遮挡效应。这两个任务极具挑战性。首先,雨滴/雪花造成了图像背景信息严重丢失,使得图像结构难以辨识和复原。其次,图像上的雨滴/雪花的大小和外观具有很大的可变性,这使得雨滴/雪花区域的检测异常困难。以上两个任务的一个关键是要准确且鲁棒地找出雨滴/雪花的遮挡区域,获得雨滴/雪花的空间信息,并作为一个先验知识指导图像修复过程。本文针对雨滴/雪花的形状特性,提出了一种椭圆形状注意力机制,用于图像雨滴/雪花区域的检测。通过数学推导,本文给出了该椭圆形状注意力机制的一种卷积实现方式。这种方式使得该注意力模块能直接有效地插入到任意的卷积神经网络中。通过把该形状注意力机制与通道注意力机制结合到残差卷积神经网络中,本文提出一个新颖的空间-通道双重注意力深度网络,实现了有效的图像去雨滴和图像去雪花。通过在基准数据上的实验,本文验证了所提出的形状注意力机制以及所提出的双重注意力深度网络的有效性。本文的研究成果能为其他恶劣天气下的图像处理任务提供借鉴和新思路。
其他文献
近年来,我国水产养殖业得到迅速发展,已成为我国国民经济的重要组成部分,利用信息技术对养殖业进行有效的管理是水产养殖业发展的需要和趋势。作为水产养殖的重点,鱼类养殖的信息化管理更具代表性。鱼群目标检测可以评估鱼类的数量,进而提供相应的数据来支持鱼类养殖的管理。而人工检测鱼群效率低下,无法满足较大规模的养殖管理需求,此时就需要一种高效自动化的鱼群检测方法。目前,目标检测算法主要基于一些公开数据集和陆地
由于传统能源的逐渐枯竭和新能源的快速发展,锂离子电池组在电动汽车和储能电站中正得到广泛的应用。在锂离子电池组内部,串联连接的电池单元之间存在的不一致现象会导致电池组可用容量降低、使用寿命缩短,因此需要电池管理系统中的电池均衡电路对电池进行均衡管理。本文对均衡电路的研究现状进行了介绍,利用LC串联谐振电路作为储能元件对主动均衡电路进行改进,针对电动汽车和储能电站的电池组提出了两种新型谐振型主动均衡电
绝缘子覆冰时外绝缘水平下降,严重时会导致闪络放电故障并造成输电线路跳闸,对电网的安全稳定运行造成破坏。基于温度的故障检测方法原理简单、技术成熟,已在电力设备关键部位温度检测的研究中得到了广泛应用。但目前将温度检测技术应用于绝缘子覆冰放电故障检测的研究尚未展开。随着对复合绝缘子内置传感器技术研究的不断深入,基于温度的绝缘子覆冰放电检测方法具实际应用价值。参考内置传感器复合绝缘子实际运行特点,围绕温度
固体氧化物燃料电池(SOFC)是具有全固体结构的新型能源转化装置,可以将燃料中的化学能直接转化为电能,具有低排放、燃料适应性广等优势。在SOFC中,H2是最常用的燃料,其具有易转化、无污染等优点。但与此同时,使用氢气作为燃料的缺点也是显而易见的,如生产成本高、存储风险大等。目前,各国研究者正积极探寻使用碳基化石燃料替代H2燃料的有效方法。传统的Ni基金属陶瓷SOFC阳极材料,如Ni-YSZ(8mo
菌影(Bacterial ghosts,BGs)是指由革兰氏阴性菌严密可控表达噬菌体ΦX174裂解基因E形成的细菌空壳。由于不含核酸、蛋白质等细胞内含物且保留了天然的细菌胞外结构,菌影在生物医学研究和动物保护领域具有重要的应用前景。一方面,菌影可以作为传统的疫苗,有效刺激机体产生黏膜免疫、体液免疫以及细胞免疫应答;另一方面,菌影强大的装载能力是药物、质粒及抗原等大分子物质的递呈载体。然而,宿主菌较
近年来国家持续推进能源转型和能源改革,电力发电行业新能源利用率日益提高,但化石能源发电仍然是我国的主要发电形式,化石能源发电会排放大量二氧化硫、氮氧化物、颗粒物等空气污染物,其带来的空气污染问题仍需得到国家和电力行业的持续重视。电力系统环境经济调度从调度运行的层面对电力系统发电运行带来的环境污染问题进行宏观控制,无需额外的建设和治理成本,因而得到广泛关注。针对电力系统环境经济调度问题,本文首先对空
随着微电网技术和分布式电源的快速发展,微电网建设要求越来越高、微电网在孤岛模式下独立运行的情况也越来越多,因此在微电网规划设计阶段,综合微电网所处地区的自然资源,进行电源优化规划,实现电源结构的优化配置,保证微电网的可持续发展和经济运行。微电网中含有风电、光伏、小水电等分布式电源,由于气象情况会直接影响这些分布式电源的出力,所以微电网所处地区的气象条件对风、光、水等可再生能源的容量配置占比起了决定
随着移动通信技术的发展,基站天线系统的集成度越来越高,天线的小型化和宽带化成为重要的发展趋势。在现代天线设计中,电磁超表面技术的应用受到人们的广泛重视。通过使用特殊设计的超表面使得天线小型化,缓解当前紧张的通信系统的空间资源,提高系统的集成度。本文以低剖面宽带基站天线为研究对象,通过引入人工磁导体(AMC)和超表面降低天线的剖面高度,同时保持较宽的带宽。论文工作的主要贡献如下:1.开发了一款基于A
器官芯片是一种基于微流控技术,融合生物学、材料学、物理、化学、微机电等多个学科,在体外芯片上构建的用来模拟人体组织或器官主要结构或功能的简化微生理系统。该微生理系统能够在体外模拟人体内的生理活动,预测人体对于外界刺激(包括药物)的反应,在构建生理/病理模型、研发新药等领域具有潜在的应用价值,甚至有代替当前新药临床前的动物试验的潜力。器官芯片中组织界面作为器官间相互作用的关键部位,当前其构建方式主要
近年来,联邦学习作为一种有效解决数据隐私保护和数据高效利用之间冲突的机器学习方法,受到了越来越多的关注。联邦学习允许用户在保持本地数据隐私安全的基础上,通过加密机制下的设备模型参数交互的方式来共同训练全局模型,以实现共享全局模型性能与所有数据聚合时的中央模型性能持平的目标。然而,联邦学习训练面临通信成本高昂以及数据高度非独立同分布两大关键挑战。现有的联邦优化算法在提升通信效率和提升对非独立同分布数