基于卷积神经网络与生成对抗神经网络的图像超分辨率重构的研究及改进

来源 :东南大学 | 被引量 : 0次 | 上传用户:szmms
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像超分辨率重构(Super Resolution,SR)是计算机视觉的一个经典用法,是指通过软件或硬件的方法,将低分辨率图像重构为高分辨率图像,图像超分辨率重构可分为两类:从多幅低分辨率图像重构出高分辨率图像和从单幅低分辨率图像重构出高分辨率图像。本文主要研究的是基于单幅图像超分辨率的重构方法。图像超分辨率重构在监控设备、卫星图像遥感、数字高清、显微成像、视频编码通信、视频恢复和医疗影像领域内具有良好的应用价值。由于光学仪器等硬件技术的局限性,导致一些图像模糊分辨率低满足不了特定的需求,需要使用算法等软件的方法进一步提高图像分辨率。当前基于卷积神经网络的图像超分辨率重构和基于生成对抗网络的图像超分辨率重构在某种程度上解决了传统图像分辨率的问题,但是在算法空间上仍存在改进的空间。本文深入研究了基于卷积神经网络图像超分辨率重构和基于生成对抗网络图像超分辨率重构两种算法模型,对两种模型中目前存在的一些问题,提出了两种改进算法效率的方法,有效地提升了图像的超分辨率,重构后的图像更加清晰,恢复出的图像细节也更加丰富。本文主要研究内容主要分为以下几点:本文针对基于卷积神经网络的图像超分辨率算法重构后的图像尺寸缩小和图像模糊等问题,提出了一种改进方法,在模型中增加了网络层的深度,同时加入了残差网络。改进措施既能够提取更多的图像细节,又加快了模型的训练。实验结果表明,本文提出的基于卷积神经网络图像超分辨率重构算法的改进模型重构后的图像更加清晰,恢复了更多的图像细节,并且在两种图像质量评价指标上,峰值信噪比(PSNR)和结构相似率(SSIM)得到一定程度的提高。本文针对生成对抗网络本身存在的问题引入了相对生成对抗网络解决了生成对抗网络纳什均衡点难以找到,模型难以收敛和训练等问题。基于生成对抗网络的图像超分辨率模型对于放大四倍及以上图像的重构具有良好的效果,可以恢复更多的高频细节信息。但是由于该模型的网络结构复杂,模型训练难度大,对实验环境特别是硬件条件要求高等问题,本文使用一种卷积—反卷积的方法修改了算法模型的生成器部分,使生成器的网络变成一个完全对称的网络,同时减少了网络层数。利用相对生成对抗网络的方法修改了判别网络的损失函数。实验结果表明,本文提出的基于生成对抗网络图像超分辨率重构算法的改进模型重构后图像的效果达到了原有模型的视觉效果,恢复出更多的图像细节,并且在一定程度上提高了峰值信噪比(PSNR)和结构相似度(SSIM)的图像评价指标。
其他文献
研究目的评估心房颤动(atrial fibrillation,AF或房颤)患者睡眠质量,分析术前睡眠质量对房颤导管消融术后复发的影响,探讨影响房颤导管消融术后复发的相关影响因素,以及这些因素在房颤导管消融中复发的预测价值。研究对象和方法选取2018年4月至2019年10月间在东南大学附属中大医院心血管内科分别行冷冻球囊导管和三维标测系统(Carto 3标测系统,Biosense Webster公司
目的:观察不同气管导管套囊压力下,局部使用复方利多卡因乳膏对气管插管全麻下行腹腔镜妇科手术患者术后咽部并发症发生率的影响。方法:纳入择期腹腔镜妇科手术患者140例,随机分成A组、B组、C组、D组(各35例)。A组患者气管导管不予特殊处理,术中导管套囊压维持在30cm H2O,B组患者气管插管前5分钟将导管远端均匀涂抹复方利多卡因乳膏,术中导管套囊压维持在30cm H2O,C组患者气管插管不予特殊处
机械臂代替人类从事繁重劳动和危险工作被广泛应用于生产生活的众多领域,其控制方式逐渐向基于生物信号控制的方向演进。随着脑机接口技术的发展,基于运动想象脑电实现对机械臂的控制已成为现实,然而,该技术尚不成熟且存在控制不自然的问题:如通过左手、右手、双脚、舌头等的运动想象脑电来操控机械臂。由于机械臂具有能模仿人手臂动作的独特性,操控者最舒适的控制方式是通过想象自己手臂的动作来控制对应机械臂的运动,即实现
目的:作为第一个被发现具有肿瘤抑制作用的长链非编码RNA(Long Non-coding RNA,lnc RNA),母系表达基因3(Maternally expressed gene 3,MEG3)的基因多态性已被证实对肺癌、肝癌等肿瘤易感性产生影响。目前有关中国汉族人群中MEG3基因遗传变异与前列腺癌患病风险之间关系的研究尚未见报道。本研究旨在通过比较汉族人群中前列腺癌患者以及健康人群临床资料特
背景和目的:脂蛋白脂酶(LPL)是催化甘油三酯水解的限速酶,并参与淀粉样蛋白β的形成,与2型糖尿病轻度认知功能障碍(MCI)的发生密切相关。并且促进糖尿病相关的MCI向阿尔兹海默病(AD)转变。LPL对脂代谢紊乱、胰岛素抵抗及脑神经功能均有影响。Rs328是LPL常见的突变基因,研究发现其可降低AD的风险。本研究旨在探索血浆LPL水平及其基因rs328多态性与2型糖尿病轻度认知障碍的关系,为MCI
目的:研究并探讨光学增强内镜在喉癌前病变及喉癌诊断中的初步应用价值,初步总结不同类型病变光学内镜下成像特点,从而为后续临床研究提供参考。方法:选取东南大学附属中大医院耳鼻咽喉头颈外科2018年5月至2019年12月住院手术治疗的喉肿物患者共121例,共诊断喉肿物病变162侧,应用光学增强(Optical Enhancment,OE)内镜的3种观察模式(普通白光、OE模式1、OE模式2)分别对同一喉
背景经皮椎间孔镜下髓核摘除术(PELD)作为一种内镜直视下微创手术,可显著消除或减轻腰椎间盘突出症患者的腰腿部疼痛。因为该术式创伤小,术中常需要患者配合,所以常在局麻下进行。然而,在导引针穿刺、工作套管置入、椎间孔成形和髓核摘除等手术步骤中,部分患者仍然可以感受到剧烈的急性疼痛。有报道证实非甾体类抗炎药、芬太尼及其衍生物,在PELD术前给予,均能取得一定的术中镇痛效果。报道也指出,非甾体抗炎药的镇
太赫兹技术在最近几年内发展得非常迅猛,太赫兹信号检测与成像技术一直是一个比较热门而且复杂的前沿课题。在太赫兹信号检测中,读出电路的基本功能是将光波照射的信号强度转换为电压或者电流信号,进行读取并数字化,良好的读出电路性能决定了信号检测的准确度。本文是基于Nb5N6微测辐射热计的特点,采用0.18μm CMOS工艺,设计用于太赫兹信号探测器读出电路阵列的后端电路部分,阵列规模以8×8为目标。课题组之
目的:根据组织病理学类型、严重程度、解剖部位、病变数量分析不同临床特点的结直肠息肉与幽门螺杆菌(Helicobacter pylori,Hp)感染的关系。方法:以2016年1月至2018年12月在东南大学附属中大医院消化内科行结肠镜检查的住院患者为研究对象。满足纳入和排除标准的共有409例腺瘤患者,207例锯齿状息肉患者,另外507例无息肉患者作为对照组。Hp感染阳性的诊断依据三种检测方式:尿素呼
绝缘体上硅横向绝缘栅双极型晶体管(Silicon on Insulator Lateral Insulated Gate Bipolar Transistor,SOI-LIGBT)具有输入阻抗高、电流能力强和易于集成等优点,成为单片智能功率芯片中的核心开关器件。U型沟道SOI-LIGBT器件具有高电流密度优势,有助于减少芯片的面积和成本。但由于独特的沟道结构,U型沟道器件的di/dt过高且不受控制