基于多尺度卷积残差学习的图像超分辨率重建技术研究

来源 :兰州交通大学 | 被引量 : 0次 | 上传用户:dr_rush
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像超分辨率任务主要是通过一系列硬件或软件技术方法来将某一幅图像失真退化后产生的模糊图像复原成清晰逼真的高分辨率图像的技术过程。这种图像超分辨率技术在国防安全,医学中的影像病情分析等领域具有广泛的应用价值,因此图像超分辨率重建问题也成为当下的研究热点。由于硬件层面开支较大,现有图像超分辨率重建方法主要是在软件层面上的应用较为广泛,随着社会和工业的进步,传统图像重建技术领域难以满足现代社会发展的需要。而随着人工智能,卷积神经网络的出现,研究人员将卷积神经网络用于图像超分辨率重建领域,取得优良的效果,该技术很快成为了图像领域的研究热门,但也存在众多的难点。其主要难点问题是(1)由于特征图不同深度区域具备不同尺度的感受野信息,而现有网络大多尺度单一,只提取固定大小的局部感受野信息,导致特征提取尺度单一。(2)现有网络模型对图像的高频纹理细节信息关注度不够,导致重建后的图像边缘纹理不清晰。(3)网络模型中不同深度提取到的图像特征信息不能有效传递,导致特征利用率不足,影响重建效果。为此,针对上述问题,论文在SRCNN基础上设计出两种图像超分辨率重建方法。针对问题(1),论文设计出基于多尺度残差网络的图像超分辨率重建算法MCRN,MCRN在网络宽度上并联多个不同尺度大小的卷积核组成多尺度残差单元MRT,通过设计的多尺度残差单元融合不同尺度的特征信息,提高了网络模型提取不同尺度图像特征的能力,捕获更加丰富的感受野信息,再结合跳跃连接的方式加强网络宽度上不同网络路径和网络深度间的信息传导能力,有效实现了网络不同路径及深度之间的特征复用。为解决问题(2)和(3),在MCRN的基础上设计出基于多级特征融合网络的图像超分辨率算法IBFN。为解决问题(2),IBFN采用设计的多维注意力机制MRSF,先通过标准卷积实现通道上的注意力效果,再引入深度可分离卷积DSC实现空间域上的注意力机效果,有效提高网络对通道和空间域高频信息的关注度,将更多的训练资源分配于高频信息同时还有效减少了参数。为解决问题(3),IBFN设计出一种多级特征融合的连接方式(MNL),通过采用的多级跳跃连接方式使得构建的残差块的输出特征能够得到有效传递,提高各深度的图像特征信息利用率,同时将各残差块的输出特征进行特征融合,获取丰富的特征信息,最后在重建阶段采用补偿重建模块(CR)对上采样放大后的图像进行修复,重建出高分辨率图像。论文以DIV2K数据集为训练数据集,来分别对论文的MCRN模型和IBFN进行训练,采用了峰值信噪比指数(PSNR)以及图像结构相似度指数(SSIM)两种数值评估指标,对模型生成的图片质量进行了客观的评估,再根据人眼视野对生成的图片质量进行了主观视觉特征上的辨别和分析,以此对经图像超分辨率重构生成的图像质量做出了总体评估。将论文方法同几种先进方法在测试数据集Set5,Set14和BSD100上进行×2,×3,和×4尺度因子的重建操作,通过实验数据得出论文中算法的数据指标PSNR及SSIM均高于其它几种对比的先进方法。且最终生成的图像在视觉效果上看,MCRN和IBFN生成的高分辨率图像纹理细节更丰富,清晰度较高,整体效果上更接近原始高分辨率图像。
其他文献
近年来,中国踏上社会主义现代化进程,党中央加大对交通领域的投资建设,城乡距离缩短进一步带动城镇经济的发展,但当前城市路网建设依旧处于发展阶段。随着购车热潮的兴起,道路交通基础设施建设速度与机动车保有量增速逐渐无法匹配,城市交通拥堵问题日益严重。精确、实时的交通信息预测能够感知和分析交通数据的演化趋势,是交管部门缓解城市交通压力的有效手段。当前,传统交通流预测模型在建模时缺乏对影响交通流的多方因素的
学位
随着城市智能化的逐步发展,室内定位技术的重要性和价值日益显现,且已然成为大众生活中不可或缺的一部分。然而,室内定位深度学习(Deep Learning,DL)模型在实时定位阶段极易遭受对抗样本攻击,室内定位系统的服务质量面临着重要挑战。并且随着室内定位动态环境不断变化,现有的室内定位DL模型无法保证实时性和准确性,在给个人和企业带来巨大利益的同时也存在着日益严重的安全问题。如何在抵御对抗样本攻击的
学位
目的本研究目的旨在探讨幽门螺杆菌(HP)感染所致的胃癌与非HP感染所致的胃癌之间是否存在差异,以表皮生长因子受体家族(ERBB受体家族)的表达作为主线进行研究分析。拟具体从HP临床检测手段、胃癌的临床特征、ERBB各分子的表达情况三方面进行对照研究。首先寻找能辨识HP感染确切可靠的分组方法、其次分析临床宏观特征之间的区别和差异,最后以经典的实验方法验证分析与胃癌相关ERBB家族的表达情况。最终试图
学位
目的:探讨金属基质蛋白酶在肾脏缺血再灌注中的作用,明确人脐静脉来源的外泌体对肾脏缺血再灌注损伤的保护作用。方法:选取生长至对数期的HUVEC使用含10%血清的1640培养基培养,获得其上清液,将所获得的细胞上清液置于超速离心机离心管中,之后使用密度梯度离心法分离外泌体,经梯度离心后获得人脐静脉来源的外泌体,并且经过透射电镜,粒径分析及外泌体标志蛋白的蛋白免疫印迹法检测证明获得的外泌体可用于后续的实
学位
研究背景:骨质疏松症(osteoporosis,OP)是一种骨科较为常见的疾病,各种类型的骨质疏松中以绝经后骨质疏松占比较高。绝经后骨质疏松性骨折及骨质疏松性疼痛困扰着全世界的女性,但其发病机制尚不明确。研究发现,感觉神经和其分泌的肽类物质降钙素基因相关肽(Calcitonin gene related peptide,CGRP)同时具有参与痛觉调控和促进骨生成的作用。此外,5-羟色胺也在痛觉调控
学位
公路作为带动区域经济发展的重要基础设施之一,对国民经济的发展具有重要作用。随着国家对交通强国的大力推进,遥感技术被用于公路沿线的环境监测。遥感图像语义分割可以帮助工作人员更好地掌握该公路沿线的地物,帮助开展公路沿线环境的动态监测及其安全分析工作,对于对地观测、环境监测以及灾害预警具有重要作用。近年来,基于深度学习的图像语义分割方法能够高效、准确地获取到所需要的图像语义信息,具有巨大的实用价值。然而
学位
随着互联网时代的到来,各种社交和电商网络平台进入了人们的生活,人们在享受网络即时性、便捷性的同时,也在网络上产生了大量的评论性数据。这些包含大量观点的用户在线评论数据蕴含着丰富的科研价值和社会商业价值,对这些数据进行观点挖掘和情感分析已成为自然语言处理领域中热门的研究领域之一。在对这些用户在线评论数据进行观点挖掘和情感分析的过程中,由于用户在线评论数据文本篇幅短,针对性强,包含多个特定方面的情感极
学位
移动边缘计算(mobile edge computing,MEC)是一种新兴的计算范式,能够将计算、通信和存储设施扩展到接入网边缘。资源受限的终端设备可以通过MEC执行计算密集型和时延敏感型的计算任务,以满足其计算和时延需求。计算卸载是MEC的关键技术之一,现有文献对MEC的计算卸载进行了一系列充分的讨论。然而,由于MEC环境的资源约束、软硬件的异构性、终端设备的动态性和随机性,计算卸载的策略优化
学位
随着高速铁路的飞速发展和全面普及,保证列车的行车安全变得越来越重要。基于深度学习的机器视觉技术在目标检测领域不断取得新的成就,为铁路异物检测提供了重要的理论支持。现有的目标检测算法在铁路侵限异物检测任务中存在小目标检测精度不理想的问题,本文基于深度学习的目标检测算法展开以下几个方面的研究:(1)提出多尺度特征跳跃融合的SSD小目标检测算法。针对SSD算法对铁路侵限小目标的检测精度低的问题,提出高效
学位
目的:本研究旨在通过生物信息学方法,筛选与肝细胞癌(Hepatocellular carcinoma,HCC)预后有关的细胞焦亡相关长链非编码RNA(Pyroptosis-related long non-coding RNA,pylncRNA),从而构建预后模型。并进一步探索该模型在评估免疫细胞浸润和预测化疗药物敏感性等方面的应用价值。方法:从癌症基因组图谱(The Cancer Genome
学位