基于注意力机制的轻量级图像超分辨率重建方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:stefanie888
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着信息时代的逐步发展,人们对图像分辨率的要求也越来越高。由于通过改进硬件提升拍摄图像分辨率的方案成本较高且存在瓶颈,人们对已获取的图像分辨率也有提升需求,因此,超分辨率重建技术通过使用数字信号处理的方法提高图像分辨率,获得了国内外学术界与商业界的极大关注和深入研究。基于深度学习的图像超分辨重建方法是近年来新兴的一类方法,此类方法主要使用卷积神经网络从大量的低分辨率-高分辨率图像对中学习二者间的映射关系,进而将这种映射关系应用于需要超分辨率重建的图像上,通过推理得到高分辨率图像。相比以往的超分辨率重建方法,此类方法在重建图像的准确度和视觉效果上有很大提高。但随着移动设备的普及,在计算性能、存储空间有限的设备上进行超分辨率重建的需求愈发强烈,而现有的一些基于深度学习的图像超分辨率重建方法由于模型参数量大,运行内存占用高,使其适用性受到限制。此外,深度学习中的注意力机制模块可以在少量增加模型参数的前提下,大幅提升模型性能,但现有注意力机制的设计缺乏对超分辨率重建任务的针对性。因此,如何设计轻量级的基于注意力机制的图像超分辨率重建方法,还需要深入的探索和研究。针对现有算法存在的问题,本文采用基于轻量级卷积神经网络和基于注意力机制的思想,对图像超分辨率重建问题进行研究。本文的主要工作如下:(1)针对现有方法在使用通道注意力机制时,没有考虑超分辨率重建算法模型训练与测试环境不匹配导致模型性能受限的问题,本文提出了一种基于局部特征增强的重建策略,增加了注意力机制对图像局部特征的关注度,使模型性能得到进一步提升。并针对现有基于卷积神经网络的超分辨率重建算法所使用的网络模型参数量庞大导致使用场景受限的问题,提出了一种扩张蒸馏残差网络,在实现高质量图像超分辨率重建的同时,降低了模型所需的参数量和计算量。(2)针对现有的超分辨率重建算法在使用注意力机制时忽视了模型中特征之间的关系,本文提出了一种特征相关性注意力机制,提升了网络对特征的选择与判别能力。本文还使用这种注意力机制构建了一个轻量型感知图像超分辨率重建模型,用于将低分辨率图像恢复成重建效果更加真实的高分辨率图像。此外,本文设计了一种特征分块重建策略,进一步提升了带有特征相关性注意力机制的模型的性能。充分的实验结果证明本文的模型在多个数据集、多种评价指标下都有着优秀的效果。
其他文献
高分辨率遥感图像场景分类是遥感技术的重要应用,近些年来在自然灾害检测、环境监测和城市规划等诸多领域中发挥着越来越重要的作用。特征提取是遥感图像场景分类中的关键一步,当前以卷积神经网络为代表的深度学习方法能够自动提取图像特征、利用大量样本进行端到端的训练与预测,分类性能相比传统场景分类方法有了显著提高。然而,现有的深度场景分类方法多以层次化卷积获得判别场景的图像语义,所提取的特征信息单一,缺乏对关键
自组织网络是一种无中心节点的分布式网络,其具有快速组网、灵活部署、抗毁能力强等优点,在军事行动、抢险救灾等方面应用广泛。传输控制协议(Transmission Control Protocol,TCP)是IP网络中一种典型的端到端传输协议,其能够在有线网络中提供高吞吐量的可靠传输。然而,在自组织网络中,无线信道时变且易受干扰、节点快速移动导致网络拓扑的动态变化及多跳传输带来的时延问题,使得TCP并
随着虚拟现实设备的进一步普及,人们越来越追求更具沉浸感的视觉体验,点云作为三维场景的主要表示方式,被视为下一代沉浸式媒体中最为关键的内容之一。现有的三维激光扫描设备可以轻易获得高精度的点云模型,海量的点云数据在为用户提供细腻逼真的场景呈现的同时,也为传输带宽和存储空间带来了更大的压力,因此针对点云数据压缩算法的研究是非常必要的。然而,当前常用的静态点云压缩方案并没有充分考虑到点云模型自身在三维空间
随着无线通信技术的发展,电子设备种类与数量不断增加,导致电磁环境日益复杂。接收机作为电子通信系统的核心设备,其内部包含放大器、混频器等各种非线性器件。干扰信号会使接收机产生增益压缩、互调等非线性效应;宽频带、非恒包络的调制信号使接收机记忆效应更为显著,进而影响接收机非线性效应,导致接收信号失真。因此,开展接收机非线性效应研究,构建接收机非线性行为模型,预测接收机非线性响应,对复杂电磁环境下接收机的
近年来,人口老龄化程度加剧导致老年人口规模膨胀,如何满足数量不断增加的老年人和肢体残疾的人群在室内自由活动的需求和出行需求是当前急需解决的问题。传统的电动轮椅对使用者来说操作难度较大,学习成本较高,且在行进过程中容易发生碰撞。针对上述问题,本文对智能轮椅构建室内环境地图及自主导航过程中涉及的问题进行了研究。论文的研究内容主要包括以下几个方面:首先,利用激光雷达同步定位与建图(Simultaneou
物联网旨在实现万物互联,提供无处不在的服务,支撑着智慧城市、智能家居、工业控制等领域。海量物联网数据接入和分布式服务提供是其广泛应用的核心技术。针对物联网海量设备差异化、通信协议多样化、数据格式私有化、服务提供组合化等导致了物联网数据接入复杂度高、服务组合提供难度大的问题,本文聚焦于异构物联网数据的快速接入和多域物联网服务组合提供方法,设计并实现了物联网平台数据接入和服务提供系统。针对海量异构设备
合成孔径雷达(SAR)作为一种主动式的对地观测系统,可安装在飞机、卫星、宇宙飞船等飞行平台上,全天时、全天候获取遥感数据,分辨率高,且穿透力和存活力极强,因而被广泛应用于军事和民用领域。作为一种独特的侦察手段,SAR在军事领域最主要的应用是实现对特定军事目标的检测和识别,推动军事战场的信息化、现代化以及高效化。因此如何实现SAR图像目标识别具有重要的理论和实践意义。近年来,计算机硬件性能飞速提升,
随着科技水平的发展,水下探测已经成为世界范围内一项重要的科学探测工作。水下光学成像是开展水下科探的重要手段之一,其图像质量是影响探测成效的关键因素。然而,复杂的水体环境致使水下物体成像时受悬浮颗粒吸收和散射作用影响,形成模糊的边界与较低的对比度,水中物体难以被辨认,同时呈现不同程度的蓝绿色偏,不能反映水下物体的真实样貌,也为后续一些图像处理高级任务带来困难。水下图像复原处理能够提升这类图像的清晰程
恒虚警率处理作为雷达系统中实现自动目标检测的重要技术手段,是当今雷达信号处理领域中不可或缺的一部分。雷达工作的电磁环境随着军用、民用无线电技术的快速发展和应用而变得日益复杂,其对目标检测方法的性能要求也在不断提高。最早被提出的经典恒虚警率处理方法由于不具备自适应的特性,在复杂的背景环境中往往无法保持良好的检测性能。因此,如何根据参考单元的样本特性自适应的计算检测门限就成为了恒虚警率方法研究的主要方
学位