基于深度神经网络的图像超分辨率重构算法研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:forlichking
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
受硬件设备和传输介质等物理条件的影响,最终呈现在终端等显示设备上的图像分辨率仍然无法满足人们的需求,特别是对于图像细节要求较高的军事及医疗等领域。基于深度学习的发展以及所获取到的大规模数据,研究人员已经将深度学习应用到超分辨率重构中。通过线下端到端的训练方式,利用已知的低分辨率图像重构出对应的高分辨率图像。后续研究表明可动态调节感受野的卷积网络具有更好的特征传递与表达能力,然而,目前大部分的超分辨率网络仅利用固定感受野的卷积结构,导致重构出的图像结构平滑不够清晰,或者产生伪影而不够真实。为了解决以上问题,本文基于深度学习,重点解决了图像超分辨率重构方面的问题,提出了两种图像超分辨率重构算法:(1)基于多路动态核选择卷积网络的超分辨率算法(Multi-path Selective Kernel Super-Resolution,MSKSR)。以往的超分辨率算法中固定大小的卷积核限制了感受野获取信息的能力,使重构出的图像无法获取捕捉不同尺度的上下文信息而过于平滑。MSKSR通过Merge-and-Run多路结构自适应地调节卷积核大小以获得多尺度的上下文信息,强调了关键信息的同时压缩噪声信息;最终结合丰富的感受野使重构图像具有更精细的纹理结构。(2)基于Octave卷积的超分辨率算法(Octave Super-Resolution,OctSR)。由于自然图像中的信息传递具有不同频率,因此卷积层输出的特征图可类比为不同频率下的信息融合。OctSR利用Octave卷积对特征进行分离再融合,分离过程中对变换较为平缓的低频特征分量进行空间降采样。因此,OctSR在保证卷积的同时更能变相地增大感受野,并且完整保留的高频信息恰好可以恢复图像的精细细节。实验结果表明该算法不仅能恢复出具有高质量的图像,更节省了空间和计算成本。最终的结果表明提出的两种分别针对网络结构和卷积层的图像超分辨率算法能够充分利用特征信息进行图像重构,恢复的图像纹理细节更加清晰,且模型易于收敛,具有良好的性能。在DIV2K上的实验效果表明,MSKSR具有更高的PSNR和SSIM指标,提高了图像清晰度;OctSR能保证模型性能的同时,降低约8.7%的浮点计算量,为Octave卷积在超分领域的运用提供了借鉴。
其他文献
抽水蓄能电站对于国家水电事业发展、电网系统稳定、用户使用安全和注重整体效益与效率,具有高效的、不可或缺的重要作用。本文通过调查、整理我国抽水蓄能电站的建设、已批
基于OLED显示的复合红外光传感器件是指将无机红外探测单元和有机光显示单元耦合实现红外光到可见光转换的光电器件。由于该器件在军事和民用领域的大量需求与应用,引起了国
“互联网”的快速发展将人们带入了“万物互联”的时代,改变了人们的生活习惯,同时也给企业的生产模式带来了改变。工业互联网的不断发展,一方面极大地提高了企业生产效率和服务水平,另一方面也使原本封闭的工业控制系统变得越来越开放,并且工业互联网环境的多变性致使系统安全风险和入侵威胁不断增加,网络安全问题日益突出,因此解决工业互联网的安全问题刻不容缓。在工业互联网的安全防护架构中,怎样保证从边缘层的数据采集
本文研究了一类半线性奇异临界方程组和一类对应的拟线性奇异临界方程组,共分为了三个章节.第一章,我们阐述了本文所研究的问题以及问题的研究背景,并且列出了文章中所运用的符号、定义和主要结论,最后对文章的结构进行了安排.第二章,我们以一类带有强耦合项和不同Hardy项的半线性奇异临界方程组为研究对象.首先通过构造过渡变量以及截割函数并结合不等式放缩的方法,我们对带权函数的弱解的相关积分形式进行化归,再运
随着我国经济的快速发展,由此引发的环境问题日益明显,恶臭污染给人们的生活带来诸多不便。国内对恶臭污染的研究起步较晚,目前尚未取得显著成果。对于复合恶臭的检测需要连
波动性是金融市场的重要特性,它与金融的不确定性和风险有非常重要的关系,是衡量金融市场品质和效率的直接指标.如何有效地刻画金融市场波动的动态行为从来都是金融研究的非
国有企业管理者短视一直是历次国企改革试图解决的关键问题。例如,为了保值增值国有资产,国务院国资委于2003年下发《中央企业负责人经营业绩考核暂行办法》,旨在通过建立有效的激励和约束机制遏制国有企业管理者短视行为。经营业绩考核由年度经营业绩考核与任期经营业绩考核两部分构成,年度考核结合任期考核的设计初衷主要是通过统一国有企业短期目标与长期发展建立中长期激励约束机制。一方面,使管理者关注企业长期竞争力
排球运动中,进攻与防守的对抗是永恒的主题,灵活多变的进攻战术与步步为营的防守的对抗是排球比赛中的精彩看点。在攻与防的对抗中时间、节奏以及信息化是比赛取胜的关键因素。而防守反击作为两大主要战术系统之一,在排球比赛中起着不可替代的重要作用,其实力的强弱是一支队伍整体水平至关重要的体现。本文运用文献资料法、案例分析法将“9段双网”构想如何运用在排球防守反击中进行细致介绍与分析。同时运用录像观察法、数理统
类似于电子元器件的发展,光学元器件的集成化和小型化能显著提升光学系统性能,开辟了许多新的应用领域。其中小型化的激光器是加快集成光子器件发展的关键因素,它在片上集成的光通信和数据处理具有巨大的应用潜力,这可能使数据传输速率超过现有的集成电子回路。因此,作为重要的光源设备,激光器小型化的前景尤为特殊且极具挑战。传统的激光器由于使用光学谐振腔而无法突破衍射极限,因此物理体积无法压缩到半波长以下。一个可行
  随着国家的逐步发展,部分企业的偷排漏排现象日益突出。现目前的排查方法普遍存在效率不高,过度消耗人力物力等问题,因此需要一个减少人力成本并结合群众效应的监测系统。该