基于像素注意力的遥感图像四倍超分辨率重建

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:cangxialong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
遥感进行远程的数据采集,获取大范围的区域信息。遥感图像在农业领域可进行植物观测,在气象领域可进行天气预报,在地质领域可进行环境探查,在各种领域都可以发挥作用。近年来,遥感图像的空间分辨率获得了提高,图像涵盖更多信息,每个像素点代表的地面区域更大。相对地,遥感图像中的对象变得更密集、更难以判别。在保证高空间分辨率的同时,从硬件的角度来提升成像分辨率较困难,不仅研发成本高昂,数据的传输成本也会增加。本文旨在通过神经网络的方法将硬件采集到的低成像分辨率遥感图像生成为更清晰的图像。本文主要工作可以分为以下三个部分。第一,将现有的网络模型,用于单图像超分辨率的增强深度残差网络(Enhanced Deep Residual Networks for Single Image Super-Resolution,EDSR),应用于遥感图像的四倍超分辨率重建。针对于连续的上采样操作在进行四倍放大时无法有效提取特征的现象,采用残差网络来间隔上采样操作。将深度残差模块作为上采样的一部分,将两次上采样用残差网络进行分隔,先学习更复杂的非线性映射后再进行放大。实验结果表明,将深度残差模块作为上采样模块的一部分后,在相同参数量下可以提高遥感图像四倍放大时的重建效果。第二,对于四倍放大时图像细节模糊的问题,将用于单图像超分辨率的增强深度残差网络与卷积块注意模块(Convolutional Block Attention Module,CBAM)进行结合提出基于像素注意力的遥感图像重建网络。该网络结合了通道和空间两种注意力方法,将深度残差提取出的特征先在通道维度进行加权平均,再在空间维度进行加权平均,自适应的学习两种权重。实验结果表明,与用于单图像超分辨率的增强深度残差网络相比,该网络可重建出更好的细节。第三,根据遥感图像中色彩越杂乱的区域重建越困难的现象,本文提出了一种可以模拟方差关系的、二阶的聚合像素注意力模块。不同于采用空间维度的池化层进行聚合的传统方式,本文通过计算特征像素与周围像素之间的方差来聚合注意力。根据方差的公式推导,采用两个特征逐像素相乘的方式可以自适应的表示出图像的二阶关系。因此采用特征逐像素相乘来代替池化层进行聚合,可以根据色彩的方差关注色彩更杂乱的区域。实验结果表明,在遥感图像的四倍超分辨率重建中,该方法获得的图像更容易辨识出较小的对象。此外,本文探索了在较早的层中引入高阶表示对重建效果的影响,以及与增强上采样结合后的效果。
其他文献
油体是植物储存油脂的主要细胞器,是由半单位膜包裹三酰甘油(TAG)而形成的球体,半单位膜由单层磷脂分子及镶嵌在其中的油体结合蛋白构成。油体在植物光合系统建立之前通过乙醛酸循环体的脂肪酸β-氧化过程为植物种子萌发和幼苗发育提供碳水化合物及能量,在植物非生物胁迫应答方面也发挥着重要作用。油体结合蛋白包括油体蛋白、油体钙蛋白和油体固醇蛋白三种。三种蛋白中油体蛋白被广泛研究,油体钙蛋白及油体固醇蛋白研究较
学位
随着物联网(Io T)的快速发展,一种在用户或社区之间感知和共享数据的新方法,移动群智感知(Mobile Crowdsensing,MCS)逐渐成为近年来的研究热点之一,其被认为是通过采用移动终端来收集感知数据的有效范例。任务分配是移动群智感知的关键步骤。现有工作中的任务分配有多种方式,本文研究两种常用的任务分配方式。一种是基于位置的MCS任务分配,平台依据用户与任务之间的距离进行任务分配。另一种
学位
随着现代社会计算机系统的高速发展,各种信息威胁也应运而生,信息安全受到越来越多的关注。信息的安全性除了依赖密码算法自身的数学原理保证安全之外,密码算法在系统上实现过程中的物理变化也对其构成了威胁。近年来,出现了各种针对处理器的缓存侧信道攻击,主要利用处理器内部缓存的争用来泄露进程之间的秘密信息[1]。攻击者利用高隐蔽性的缓存侧信道技术,从目标缓存中获得进程执行的缓存状态等敏感数据,对传统密码计算应
学位
随着现今物联网技术和5G网络的飞速普及,智能交通设施、智慧城市建设、移动支付等新型的服务生活模式和业务持续性迭代更新。“信息感知”的思维态势开始逐渐扩展至物联网体系内,万物互联的大数据处理时代已然来临。然而,由于云计算与万物互联特定属性中的矛盾,仅仅凭借云计算的集中计算处理技术,难以支撑基于物联网感知的应用运行和海量数据处理。为此,融合目前流行的云计算集中处理方式,智能云边端协同可以高效处理云中心
学位
移动网络的发展给人们生活带来了极大的便利,使用移动应用可以在线处理众多事务,如转账、购物和导航等,然而在享用移动应用提供便利的同时,不可避免的需要将个人敏感信息保存至移动设备或上传到远程服务器中,因此对于这些敏感信息的保护显得尤为重要。为了实现应用、系统以及其他资源之间的安全访问,防止信息的泄露,安卓系统提供了权限机制用于控制应用对系统资源(如麦克风,摄像头等)和其他应用组件的访问,很多移动应用自
学位
随着社交网络的快速发展与人脸识别系统的广泛普及,用户在社交网络中发布的包含个人身份特征的图像和视频越来越多,这些图像与视频非常容易被恶意用户利用来攻击人脸识别系统,从而威胁用户的合法利益。社交网络的隐私保护方法对计算效率有较高要求,并且需要在保证图像视觉效果没有受到较大影响的前提下尽可能增加隐私性。传统的基于对抗样本的隐私保护方法计算效率较低且方法的隐私性能受到目标模型知识的限制,在对抗样本的计算
学位
近年来,伴随着人工智能、网络安全、信号对抗、无人系统集群控制技术的发展,相关技术的实现在给人们带来便利的同时,无人系统集群自身的安全问题也引起了广泛关注。在现今生活中常见的无人系统集群中,常遇到来自外界的信号干扰和恶意攻击者的洪水攻击或DOS攻击,但是由于现实情境的多样性和信号干扰的复杂性,无人系统集群的识别和控制常常出现各种困难,从而造成财产或其他损失。因此,针对无人系统的识别分类技术和针对性的
学位
蓬勃发展的各类社交网络应用在给人们的生活带来极大便利的同时,也引起了人们对于隐私安全的担忧。用户使用社交网络发布的数据中常常含有个人隐私信息,这些隐私一旦泄露将对用户造成极大危害。然而多数用户无法合理评估他们数据中存在的隐私风险,难以选取合适的防护措施实现有效的隐私保护。因此,亟待解决对社交网络数据中用户隐私信息的精准感知与动态度量问题,支持隐私保护。本文以社交网络上用户自发布的多元异构数据为研究
学位
在互联网迅速发展的时代,尤其是疫情频发的当下,线上密封式拍卖完全突破了地域限制,为竞拍者创造了足不出户的竞拍环境。互联网线上拍卖已然形成了一种新的经济模式。与此同时,区块链已经成为一项逐渐成熟的应用手段,其凭借着去中心化、公开、不可篡改、可追溯等特性在金融、医疗等各行各业都发展出落地应用,这些应用也为线上密封式拍卖提供了一种新的设计思路。将线上拍卖和区块链相结合,可完全去除第三方拍卖行的参与,真正
学位
现实世界中的许多复杂系统都可以被建模表示成复杂网络。系统中的实体被表示为节点,实体之间的关系被表示为边。作为复杂网络分析中的一个基本问题,链路预测在过去的十几年间得到了广泛的研究。链路预测的目标是根据当前观察到的网络信息推断出已经存在但未知或者未来可能产生的链接。由于链路预测有助于人们理解现实世界网络的内在特征和演化机制,其已被广泛应用于许多实际场景,如友谊和物品推荐、知识图谱补全和生物反应重构。
学位