基于深度学习的图像修复方法研究

来源 :东南大学 | 被引量 : 0次 | 上传用户:liu6541
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像作为视觉的客观反映媒介,是人类认识自身乃至世界的重要信息来源。计算机技术的发展为数字图像处理技术的兴起提供了条件。然而,由于图像在进行传输或存储过程中不可避免地会受到噪声、环境或者人为因素的影响,从而导致图像部分信息丢失。因此对于图像修复技术的研究是一个基本且重要的课题。图像具有丰富的细节特征信息。由于图像沿着某一方向的像素值呈现出不规律的变化趋势,因此可将其看作二维的非平稳信号进行分析。经验模态分解(Empirical Mode Decomposition,EMD)是一种针对非线性非平稳信号的自适应分解方法,它可以有效避免小波变换等传统非线性非平稳信号分析方法存在的缺陷。鉴于EMD的优良性能,国内外学者将其拓展到二维信号,得到了针对图像等二维信号的二维经验模态分解(Bidimensional Empirical Mode Decomposition,BEMD)技术。本文围绕经验模态分解的原理以及关键技术展开研究,针对BEMD存在的边界效应以及局限性提出了改进方法。除此之外,将经验模态分解与深度学习相结合,探索了其分解结果作为特征先验信息应用于图像修复神经网络中的有效性,具体如下:(1)针对BEMD分解过程中无法精准确定边界极值点从而产生边界效应的问题,提出了一种基于二分类的镜像延拓方法。该方法在镜像延拓之前预先对边界极值点进行分类处理,聚焦难以确定为极值点的边界像素点进行延拓。该法在求取边界极值的同时,降低了计算冗余。通过实验仿真,证明了该方法对于抑制边界效应的有效性。(2)针对BEMD只有一个分解通道而无法分解彩色图像的问题,引入了二维多元经验模态分解(Bidimensional Multivariate Empirical Mode Decomposition,BMEMD),多元即多通道,该方法在BEMD的基础上增加了通道数用来处理多幅图像。因此本文提出了一种将彩色图像分为R、G、B三个通道进行模态分解的思想。实验结果表明,分解所得的一阶BIMF分量和残余分量分别包含了原图的纹理特征和颜色信息,这种特征提取的方法为后续图像修复提供了条件。(3)根据条件生成对抗网络(Conditional Generative Adversarial Networks,CGAN)在生成对抗网络(Generative Adversarial Networks,GAN)的基础上增加输入约束变量以控制生成图像类型这一思想,提出了将BMEMD所提取的图像特征作为先验信息与CGAN结合的方法,实现了较原模型更具有针对性的修复。具体做法为:首先,将CGAN的条件约束输入换作具有纹理特征和颜色信息的参考图像;其次,调整模型的参数进行收敛训练;最后,通过主观视觉感受以及PSNR、SSIM和收敛速度三个客观指标对实验结果进行定性和定量分析。此外,采用GAN和原始CGAN模型修复图像作为对比试验,实验结果表明,本文提出的基于特征提取的CGAN图像修复方法在保证修复图像质量的同时,有效地提升了图像修复的效率。
其他文献
膨胀机是动力循环的重要组成部件,是实现将热能转换为动能和机械能的关键设备之一。在为缓解能源与环境问题而被提出和研究的超临界二氧化碳动力循环、有机朗肯循环、余热回收动力循环等研究中,改进或开发更加合适的且高效节能的新型膨胀机是近年来的一个研究热点。透平式膨胀机适合于大中型的应用场合,而容积式膨胀机被广泛建议应用于中小型场合。滑片式膨胀机是其中的一种,其结构简单、成本低、可靠性高、动力平衡性能好;但是
“碳中和,碳达峰”的能源新形势下大容量火电机组逐渐发展成为承担调峰任务的主体,火电机组需要提升其宽负荷运行的经济性和灵活性。本文以某超超临界1050MW机组为研究对象,基于APROS仿真平台建立模型,在模型验证准确的基础上,开展宽负荷运行优化研究工作。首先,分析当前主流的节流配汽机组宽负荷运行经济性低的原因,参考高压缸分列布置的新型配置方法对机组进行改造,并建立了APROS仿真模型,研究优化后机组
随着我国城市化进程的加快,都市规模进一步扩大,地铁具有快速、准时、运量大等优点,因此逐渐成为城市公共交通系统中的重要一环。然而,地铁站多处于地下,结构狭长,人员密集,一旦发生火灾容易造成大量人员伤亡和财产损失。地铁火灾中,火灾烟气是导致人员伤亡的主要因素,而有效的排烟模式能够排除烟气,减少人员伤害。因此,对地铁车站火灾排烟模式开展研究,对于保证站内人员的生命安全具有重要意义。本文应用数值模拟的方法
为大力推进节能减排,坚持绿色发展,高温烟气过滤除尘技术,作为我国先进生产技术的重要组成部分和关键技术环节,广泛应用于多个领域。但常见的耐高温滤料尚不能满足高温除尘的各项要求,如玻璃纤维滤料耐温性、耐折性差;陶瓷多孔滤料抗热振能力差,寿命短,成本高。本文以高性能、低成本为研究目标,开发新型合金纤维滤料,并开展合金纤维滤料腐蚀特性的研究对于资源集约、环境友好、推动产业结构优化升级具有重要意义。本文从腐
学位
随着资源短缺和环境问题日益严重,闭环供应链作为一种资源节约型供应链受到越来越多企业和学者关注。论文研究由一个制造商和一个零售商组成的单周期二级闭环供应链,制造商作为闭环供应链主导者,分别讨论闭环供应链平稳状态下和应急状态下收益共享契约设计问题。论文首先综述国内外相关研究成果,接着研究平稳状态下由一个制造商和一个零售商组成的单周期二级闭环供应链,其中制造商是闭环供应链主导者,讨论集中决策模式和分散决
垃圾焚烧是城市生活垃圾处理处置的主要方式之一,但焚烧烟气中的HCl气体会引起过热器等金属受热面的高温腐蚀,并强化二恶英的再合成反应,因此研究垃圾焚烧烟气中HCl气体的脱除具有重要意义。类水滑石吸附剂能够有效脱除HCl等酸性气体,具有潜在的应用前景。但是目前的研究表明,类水滑石吸附剂用于高温下脱除HCl气体时仍然存在碱性失效较快,吸附量不够大等问题,脱除HCl效率需要进一步提高。本文开展了改性类水滑
学位
随着中国城镇化进程的日益加快,城镇居民数量迅速增加,这给城镇居民生活环境带来了巨大的压力,城镇生活垃圾的处理问题也愈加突出。垃圾焚烧发电、垃圾填埋和垃圾堆肥是目前中国常用的三种垃圾处理手段。其中垃圾焚烧与卫生填埋、垃圾堆肥等传统处理方式相比,具有占地面积小、处理效率高、环境影响小等优点,更能满足城市生活垃圾处理减量化、无害化的需求,并且生活垃圾焚烧处理还能产生热能,实现生活垃圾资源的二次利用。目前
研究目的:2型糖尿病患者早期即可发生微循环改变导致腹部血流动力学异常。本研究旨在利用新兴的磁共振4D FLOW序列更全面、更精准地评估2型糖尿病患者肾动脉脾动脉血流状态及其动态变化趋势,以便及时地指导临床对并发症进行早期的治疗和干预。研究方法:前瞻性纳入东南大学附属中大医院已确诊糖尿病患者30例(2019年8月至2020年8月),按临床有无尿微量白蛋白(Mogensen标准:静息状态下尿微量白蛋白