基于卷积神经网络的图像超分辨率重建方法研究

来源 :北京交通大学 | 被引量 : 4次 | 上传用户:jeanstrouse
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像的空间分辨率是衡量图像质量的一项重要指标。在图像成像过程中,由于受到成像设备的物理限制以及外界环境等多种因素的影响,无法获得满足实际需求的高分辨率图像。图像超分辨率(Super-Resolution,SR)重建技术可以通过图像处理的方式,克服成像系统硬件的固有局限性,实现低分辨率图像到高分辨率图像的重建目标。得益于卷积神经网络(Convolutional Neural Network,CNN)在高级计算机视觉任务中的广泛应用,目前以CNN为基础的超分辨算法已经成为图像超分辨领域的主流算法。本文根据算法所采用上采样方式及其在网络结构中所处位置不同,对目前基于CNN的超分辨算法进行系统性的整理和分类,并分别从算法的网络结构设计策略和复杂退化场景的图像重建任务两个方面展开工作,具体包括:(1)在算法的网络结构设计策略方面,由于目前超分辨算法对于重建性能的提升过于依赖网络层数的加深或特征数量的增加,反而整体降低了网络对图像特征信息的利用率,无法显著提升图像重建质量。本文提出一种基于深度多级上投影网络(Deep Multi-level Up-projection Network,DMUN)的图像超分辨率重建算法。DMUN通过局部特征上投影单元在网络局部实现图像多级低分辨率特征信息的融合以提高整体网络对图像特征的利用率,其中残差上投影组整体采用递归方式的网络结构用于控制模型的参数成本,残差激活块将传统的残差结构与空间通道注意力机制相结合,改善网络模型的特征表达能力,避免网络对冗余特征的重复利用。实验表明,DMUN在算法重建性能和模型参数量之间取得了更好的平衡。(2)在复杂退化场景的图像重建任务方面,针对目前基于CNN的超分辨算法大多只针对单一退化场景的图像重建任务所面临的局限性,本文开展对于噪声图像超分辨率重建任务的研究,并提出一种基于条件生成对抗网络的噪声图像超分辨率重建算法NSRGAN(Noisy-image Super-Resolution using conditional Generative Adversarial Network)。为了更好地处理低分辨率图像中的噪声信息,NSRGAN在DMUN的基础上引入一个新的噪声强度估计网络为噪声图像的超分辨重建过程提供辅助条件约束。此外,本文考虑了基于相机成像过程和基于生成对抗网络的两种真实噪声模型来建模更加真实复杂的图像退化场景。通过多种噪声模型下的实验分析表明,与现有超分辨算法相比,NSRGAN在噪声图像超分辨重建这一较为复杂的任务上展现出了更好的鲁棒性。
其他文献
随着农业生产模式的变化,温室已经占据极其重要的地位。目前新型滑盖温室以其保温、光照足且经济实用的特点,在我国北方地区如辽宁、内蒙已广泛使用。但由于对温室控制主要以手动控制为主,自动化方面不足。因此本文针对新型滑盖温室结构特点,设计了一套基于STM32单片机为核心集数据采集与调控功能于一体的新型滑盖自动控制系统。设计方案以系统功能需求分析为依据,从硬件软件两个模块对系统进行总体设计,通过硬软件的相互
太阳能的利用一直被认为是解决能源危机的重要方式。基于半导体材料的光电催化技术是一种将太阳能转化为化学能或者实现有机转化的重要手段,半导体材料中光生电子-空穴的复合
线控转向(Steer-By-Wire)系统作为新兴的汽车转向系统,是未来汽车无人驾驶发展中不可或缺的组成部分。SBW系统采用电控技术,可以自主选择转向传动比,优化转向性能,但其可靠性
目的:通过随访观察功能性肌肉移植术的手术疗效,研究功能性肌肉移植术的有点,推广该术式的临床应用并优化该手术。方法:选取2008年4月2018年06月,根据纳入标准及排除标准选取18例患者争取伦理委员会许可及患方同意后行功能性肌肉移植术。并随访记录接受该术士的患者患肢肌力,观测患者屈肘功,屈指或伸指能恢复情况。按中华医学会手外科学会制定的周围神经功能评定的试用标准和英国医学研究委员会的Medical
我国的铁路旅客列车正面临着高速、智能和舒适的方向发展,12306智能服务软件受众广、用户多,是否可以为不同的用户带来针对性的服务,尤其是提高对特殊人群的服务变得越来越重要。近年来独行女性的数量日益增长,随之而来的是女性出行安全事故的频发。本文将以独行女性为例,探索12306APP是否可以通过身份细化和偏好设置功能,实现用户差异性的服务。本文将从独行女性对座位需求的不同出发,利用文献研究,调查问卷、
随着油田开采的进行,油井采出液含水率不断升高,造成污水处理费用和设施建设费用不断增加,同井注采技术可以改善此状况,该技术是在井下安装井下油水分离器实现油水分离。在采
国民党自建党之初就十分重视对党、政、军干部的训练,黄埔军校可谓国民党干部训练的滥觞。1938年,国民党中央训练委员会成立,下辖中央训练团,此团负责组织各省的干训工作。此时恰逢国民党奉行“抗战救国”的方针,并力推新县制,陕西省面临旧干部素质低,新干部数量少的问题,因此陕西省的干部训练已刻不容缓。1941年,陕西省成立省地方行政干部训练团,该团上承中央训练委员会和陕西省训练委员会的指导,其下分省、区、
为了提高农用车辆牌照识别的准确率,提高公安机关对农用车辆的管理效率,本文针对农用车牌特征结构进行了分析,并提出了有效的农用车牌照识别方法:(1)改进Canny边缘检测算法,Canny算法与传统边缘检测算法相比,在减噪和保边方面效果相对较好,但在细化识别中仍存在不足。本文提出了一种改进型Canny算子边缘检测算法,采用具有保边去噪特性的自适应中值滤波器代替高斯滤波器进行去噪方面做出了改进。实验结果表
近年来,我国轨道交通行业得到了迅速发展,客运量、货运量、运营速度和里程都有很大提升,行车安全受到了越来越多的关注。基于图像智能分析行车前方的异物入侵已经成为铁路周界安全监控的研究热点之一。而现有侵限检测系统大多基于固定相机采集,存在覆盖率低、信息交互困难等不足。为此本文提出了基于图像处理的铁路行人侵限检测算法,主要内容如下:(1)提出了低照度条件下的铁轨检测算法,实现了铁路机车全时段不间断的铁轨检
电化学发光(ECL)由于其高的灵敏度和选择性广泛应用在分析检测领域。在鲁米诺溶解氧电化学发光体系中,鲁米诺电化学发光过程涉及氢过氧自由基(HOO·)、超氧阴离子(O2·-)等多