基于多级连接注意力网络的单图像超分辨率重建

来源 :吉林大学 | 被引量 : 0次 | 上传用户:davidchen19
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在信息化时代数字图像是一种至关重要的客观信息载体。图像的分辨率则表示图像中承载的信息量。分辨率越高,说明图像提供的细节信息就越丰富。但在实际成像过程中,经常受成像设备、传感技术、有损传输等降质因素影响,遗失很多关键信息,以至于无法满足应用需求。因此提出超分辨率重建技术,通过相关算法后期提高低质量图像的空间分辨率,这在医学、遥感、监控等多个领域都有十分重大的研究意义,至今为止国内外已在超分辨率重建领域取得很大进展。本文重点针对基于卷积神经网络的单图像超分辨率重建算法进行深入研究。这类算法主要使用大批高清图像建立样本数据库,利用卷积神经网络的表征能力学习低分辨率图像与高分辨率图像之间的空间映射关系,然后将其作为先验知识重建超分辨率图像。目前大部分算法都是通过不断叠加单一的残差模块来加深网络以提升模型性能,但过深的网络带来了高频信息易流失、训练及运行成本过高等问题。另外,单一的网络结构没有充分利用卷积神经网络由浅入深表征低分辨率图像的特性,导致原始特征信息提取不足,重建的图像缺少真实细节。从上述问题出发,本文提出一种基于多级连接注意力网络的单图像超分辨率重建算法AIASR,多级连接注意力网络结构主要由以下三种机制构成:(1)深度注意力机制。在特征提取部分使用该机制将网络层按深度分区,以倒金字塔结构的方式依次为各区域设置不同的卷积核数量,使靠近原始低分辨率图像的浅层有更多特征提取机会,能够获取到更丰富的基础局部特征,以提供给后续层更多选择。(2)窗口注意力机制。在残差模块中引入该机制,利用多种尺寸的窗口进一步挖掘特征图在不同感受野下呈现出的不同高层次特征,再通过通道注意力机制分别为每个窗口输出赋予相应的通道权重,之后跨窗口将所有输出进行融合过滤,这时会更容易保留高价值的关键特征,增强网络的信息辨别能力。AIASR以窗口注意力模块作为基本的特征提取组件,并通过重复叠加该模块加深网络。另外,最后在超分辨率重建部分使用窗口注意力模块整理将要进行上采样映射的低分辨率特征空间。(3)全局特征融合机制。在特征提取部分末尾,通过该机制充分复用前面所有窗口注意力模块输出的各层次关键特征来修正低分辨率特征空间,以补全遗失在深层网络传递过程中的高频信息。本文在高清数据集DIV2K上训练AIASR,并在常用基准数据集Set5,Set14,BSD100,Urban100,Manga109上进行评估,实验证明AIASR内部各机制相辅相成,可有效提升模型性能,并且在公用的评估指标PSNR和SSIM上都超越了目前流行的大多数模型,重建生成的超分辨率图像在视觉上也比其它模型的结果更真实更清晰。
其他文献
铝合金和镁合金是应用最广泛的轻合金结构材料,然而其化学性质活泼,易被腐蚀。为提高轻合金的腐蚀防护能力,适当的表面处理是非常必要的。在表面处理技术中,超疏水防护膜可以
企业技术创新是国家创新体系的核心与主体,是企业自身发展的驱动力,如何促进企业技术创新已是各国亟待解决的问题。企业的生存与发展是在一定的环境中进行的,由于自身的开放的特点,那么企业的发展程度由其获取资源的能力决定。为了降低对外界的依赖,企业积极地进行收购、合并、获取控制权等,由于企业资源有限,这些方法不是长久之计。而董事连锁由于灵活、容易实施的特点成为最常用、最流行的处理企业间关系的对策,因此本文研
进入1980年代,预应力混凝土箱梁桥发展迅速,已成为我国大跨度桥梁的主要桥型之一。这些桥梁逐渐投入使用、承受负荷、设计和施工中的问题也逐步暴露出来,尤其是不同性质的开
本研究旨在开发美丽硬仆骨舌鱼(Scleropages formosus)基因组微卫星标记,并利用其进行亲缘关系鉴定和遗传结构分析,开展微卫星标记通用性的初步研究,来评价这些微卫星标记在骨舌鱼科中的有效性。研究表明,利用微卫星标记对美丽硬仆骨舌鱼进行亲缘关系鉴定、解析群体遗传结构切实可行。所开发标记又在骨舌鱼科其他种类中具有通用性。研究结果可为提高金龙鱼繁殖效率,分析近缘物种间的遗传关系奠定基础。1
卵形鲳鲹(Trachinotus ovatus)是中国和亚太地区重要的海水养殖物种之一,具有生长速度快,经济价值高,适合网箱养殖等优点。随着养殖业的发展,抗生素的用量也逐渐增大,不仅污染环境,还会导致病原体产生抗药性。抗菌肽抑菌机理与抗生素不同,不易产生抗药性,是抗生素的潜在替代物,筛选相关的抗菌肽基因可以用于培育优良品种。为了研究卵形鲳鲹抗菌肽基因功能及调控机制,本研究扩增了LEAP-2和NK-
柴油车排放的尾气中含有多种污染物,会造成城市雾霾等空气污染问题,其中以颗粒物(PM)和氮氧化合物(NOx)为主,而PM和NOx的产生归因于发动机中燃料的不充分燃烧和不均匀燃烧导
随着4G、5G网络和物联网的飞速发展,移动端应用已深入人们生活的方方面面,参与人们的智慧生活。Android操作系统作为占有率最高、受恶意应用威胁最大的移动端操作系统,面临着隐私泄露、恶意扣费和系统破坏等重大挑战。因此,针对Android应用的移动端应用安全性检测技术的研究是一个极具现实意义的课题。本文主要采用机器学习分类器检测应用安全性,从特征降维和不平衡数据集分类两方面进行研究,具体如下:1、
莲子是我国重要的特产经济作物,淀粉占莲子干物质含量50%以上,其中直链淀粉含量高达42%,属于直链淀粉含量高的特异性淀粉。但莲子淀粉在加工过程易出现溶解度低、稳定性差、
萘是一种易修饰的刚性共轭化合物,其共轭结构和易修饰性赋予萘分子出色的自组装性能,使其在手性材料、力致变色、荧光探针、液晶等领域有众多应用。然而,由于非手性萘分子的
废水含有丰富有机物,回收其中的生物质能对于解决水体污染与能源危机具有重大意义。厌氧正渗透膜生物反应器(AnOMBR)可以有效截留微生物和出水中溶解性甲烷,生物质能回收效果好