基于深度学习的单张图像超分辨率重建技术研究

来源 :陕西师范大学 | 被引量 : 0次 | 上传用户:fjlmh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
受到图像采集设备和采集环境的影响,采集到的图像常常会出现质量降低现象,导致采集到的图像无法使用的现象。图像复原技术主要研究通过算法手段对失真的图像进行复原,提高资源利用率。主要的图像复原技术有:超分辨率重建、图像去噪、图像去雨、图像去雾和图像补全等。超分辨率复原旨在利用经过下采样的低分辨率图像通过一定的算法进行高分辨率重建的技术。作为图像复原的核心技术之一,超分辨率重建常被用作诸如目标检测、人脸识别等高级视觉任务的前序步骤。在日常生活中,超分辨率重建常用在卫星图像、医学图像和监控安防等领域中。鉴于超分辨率重建是基于有限的信息(低分辨率图像)对图像放大并进行额外的信息补全的过程,该任务是一个典型的病态求逆问题。随着近几年深度学习技术的发展,当下主流的超分辨率重建方法是通过构建一个较深的网络模型并使用大量样本对模型进行训练,从而达到更高的超分辨率重建效果。而这些方法中,大多数存在网络模型冗余、网络中特征利用率低的问题。本文从模型压缩和提高卷积特征复用性两方面出发研究单张图像超分辨率重建任务。文中所述基于深度学习的超分辨率重建模型均达到了当前前沿水平。首先,本文构建了一个拥有稠密连接的多分路网络模型,使用更复杂的网络结构合理高效地利用模型中的卷积特征,从而实现单张图像超分辨率重建。通过组合来自不同级别的特征图,该模型可以充分利用输入的先验信息,在恢复高分辨率图像时考虑更多的上下文语义信息。大量实验表明该模型结构能够在使用更小的模型存储空间的前提下达到当下超分辨率重建的前沿水平。然后,本文从模型压缩的角度出发,提出了一种基于递归网络的超分辨率重建模型。该递归模型引入了局部残差和全局残差的概念。局部残差结构通过递归模块学习基于初始特征的残差;全局残差结构则通过最后的卷积层重建出基于网络输入的残差。在递归模块中,使用了三分路卷积连接进行特征映射。引入三分路卷积中1X1卷积在压缩输入特征的同时减少了模型参数量。另外,在递归结构中引入权重共享机制,进一步压缩了模型参数。实验表明,该模型结构能够使用极少的参数量达到目前超分辨率重建的顶尖水平。最后,本文分析并总结了现有的基于深度学习的图像超分辨率重建模型的共同特点及局限性,提出了具有更高网络特征利用率的压缩激励网络模型。模型假设不同深度的卷积特征或相同深度但不同通道的卷积特征对高分辨率图像的重建有不同的贡献,模型引入了估值网络对模型中产生的卷积特征进行重要性评估并对卷积特征进行调整。同时,稠密连接的网络结构能够极大限度地复用卷积特征并保证在构建深层网络模型时能够正常训练。该模型将位于网络不同层级的卷积特征同时输入到残差重建层对网络的初始特征进行残差重建,增强了残差模块与网络各层级之间的关联。大量实验表明,该模型在常用的图像复原评价指标PSNR和SSIM上能够达到顶尖水平的同时,对与含有复杂纹理的图像的超分辨率重建任务具有较高的鲁棒性。
其他文献
水下沙波是一种脊线垂直于水流主流向的韵律性底床形态,广泛存在于河流、河口、陆架浅海区域。其形态及演化机制的研究不仅能够加深对沉积动力学和沉积相与沉积环境的理解,更
[目的]建立原代髁突软骨细胞终末矿化诱导模型,模拟髁突软骨内成骨中软骨矿化过程并探索FLRT3与BMP信号通路之间的关系;建立加载静磁场的原代髁突软骨细胞矿化诱导模型,进一
煤在我国当前经济高速发展下的能源结构中扮演着非常重要的角色,且我国是世界上第三大煤炭资源国。但由于煤层结构的特殊性,矿井灾害十分严重,其中又以煤与瓦斯突出事故最为
轮毂电机具有结构紧凑、动态响应快、驱动效率高、车辆操控性好等优点,适用于纯电动汽车的驱动行驶。在新能源汽车电动化、轻量化、智能化的背景下,轮毂电机受到企业和科研学
目的:探讨壳聚糖季铵盐联合闭式冲洗在大鼠移植皮瓣缺血再灌注(Ischemia/Reperfusion,I/R)损伤中的作用。方法:1、实验动物分组及模型制备:采集45只雄性健康SD大鼠随机分为三
随着建筑工业化的发展,建造方式逐渐由现浇体系向预制装配式转变。预制构件竖接缝混凝土浇筑是装配结构整体性能和质量的重要环节。接缝混凝土与构件界面粘结性能是其中的难
电致变色是在外加电场的作用下,材料的光学吸收率、透过率、反射率或发射率发生可逆变化的现象。随着科学技术的快速发展,电致变色技术在智能窗、汽车后视镜、显示器等民用领
人脸检测在身份认证、视频监控、考勤系统、情绪分析等领域中具有重要的研究价值,同时也是计算机视觉中的一项重要研究课题。在约束场景下,现有的人脸检测方法已达到了较高的
氧化物弥散强化(oxide dispersion strengthened,ODS)钢是第四代核反应堆(如超临界水冷堆(supercritical water-cooled reactors,SCWRs)、铅冷快堆(lead-cooled fast reactors,LFRs
多旋翼无人机是一种飞行性能出色的无人飞行器,它通过改变各旋翼的转速来调整自身的姿态进而实现位置控制,具有悬停性能优异、移动灵活、机械结构紧凑、系统可靠性高等优点。