基于生成对抗网络的图像超分辨率重建和着色研究

来源 :新疆大学 | 被引量 : 0次 | 上传用户:XIAOXIAOFSF
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,深度神经网络通过增加模型的深度来提高特征提取和数据拟合的能力。与浅层模型相比,它在图像处理方面表现出了很大的优势,例如图像分类,图像识别,图像分割等,为图像超分辨率重建和黑白图像着色提供了新的途径,尤其是生成式对抗网络通过生成模型和判别模型对抗来达到对生成图片最大相似度的伪装,使得图像到图像间的生成和转换到达几乎无法分辨的地步。针对图像超分辨率重建和黑白图像着色研究,如何提高图像特征的利用率,减少计算复杂度,解决图像数量少充分发挥现有图像的优势等问题成为研究热点。现有模型重建质量较低,模型复杂度较高以及现有黑白图像着色精度较差等问题已成为亟待解决的问题。基于上述问题,本研究基于生成式网络结构,网络层的并行化以及与现有深度学习框架巧妙结合进行了研究,并通过实验对比了所提模型的优势,具体工作如下:(1)提出了一个基于WGAN和Res Ne Xt的单图像超分辨率重建模型Res_W GAN。该模型通过Res Ne Xt网络构造生成器,降低了模型生成器的计算复杂度,仅为SRGAN的1/8;为解决SRGAN模型不稳定的问题,判别器采用WGAN网络;为了提高学习效率,将对Res Next的网络结构进行了剪枝,去掉了BN归一化操作;实验结果表明,在四个公开数据集上本研究所提模型相较于现有的单图像超分辨率重建模型在主客观评价中均取得了更加优越的性能。(2)为解决现有模型训练数据量大,耗时等问题,提出了一个基于Sin GAN的单图像超分辨率重建模型SR_Sin GAN。就训练数据量而言,SR_Sin GAN能只需要对一张图片进行训练就可以得到超分辨率图片;从重建效果来看,改进的SR_Sin GAN模型相较于原始的Sin GAN网络,在保证训练数据量不增加的情况下,能更好的实现图像细节方面的重建。(3)为实现黑白图像着色,解决图像特征利用率低等问题,提出了基于Cycl e GAN的黑白图像着色模型SA_Cycle GAN。从有无注意力方面对比可知,添加了注意力机制的SA_Cycle GAN利用自注意力机制对卷积的特征进行了加权和处理,相较于不添加注意力机制的模型,PSNR和SSIM值均有提高,其次通过对比可知不同归一化方法的选择对网络的性能也有影响,最后通过与现有的一些模型的实验对比证明了SA_Cycle GAN模型在还原图片的时候也尽可能大的接近原始图片,达到对灰度图像实现着色的目的。
其他文献
超精密转台是微纳CT系统的重要组成部分,其运动性能对CT图像的质量有着决定性的影响,转台伺服控制系统是实现其功能的关键技术。研制转台伺服控制策略及控制算法,对超精密转台精确定位及低速平稳运行来说至关重要。本课题以重庆大学ICT研究中心研制的微纳CT用超精密转台为研究对象,展开其伺服控制系统的研究工作。目前该转台采用的是国外价格较高的驱动控制器,其软硬件集成度高,但源代码不开放,增加了软硬件控制及驱
作为加快转变政府职能的举措之一,国家整体推进政府购买公共服务。自2013年以来,国家相继制定实施相关政策文件,对政府购买公共服务的实施进行指导和规范。公共体育服务作为政府提供公共服务的重要组成部分,各地纷纷加以推进。近年来,河南省三门峡市也以购买公共体育服务的方式改善公共体育服务供给的数量和质量,但推进的成效有限。本文通过调查三门峡市政府购买公共体育服务的状况,发现影响政府购买公共体育服务的障碍因
现代互联网技术例如大数据和云计算的发展促使互联网技术和保险行业急速融合,而技术运用与消费者个人信息保护之间的矛盾与冲突也在不断加剧。互联网保险消费者个人信息具有信息化程度高、隐私性强、涉及范围广、商业价值大等新特征,因此有必要对互联网保险领域的消费者个人信息权益进行有针对性的法律保护。本文对侵犯互联网保险消费者个人信息权益的行为进行分析,结合我国互联网保险消费者个人信息保护的法律现状,在上述基础上
近年,“智慧城市”成为了世界许多城市未来发展建设重要目标。在我国,也不断有城市将建设智慧城市提上日程。在此背景下,智慧城市中应用的市政装备也在朝着智能化、无人化的方向发展。本课题通过对智慧城市和无人市政装备的研究分析,旨在提出一种智慧城市背景下的无人市政装备设计方法。提出了以人工干预、环境、任务三要素构成的无人市政装备智能水平评价模型。针对当前无人市政装备设计评价存在的问题,借鉴无人驾驶车辆智能水
自2000年国际音乐信息检索学术会议创办以来,关于音乐推荐系统的研究层出不穷,越来越多的推荐方法被提出、使用。但音乐推荐系统面临的挑战仍然艰巨,用户反馈数据的稀疏性、歌曲分布的长尾问题等等,都是亟待解决的难题。本论文对混合音乐推荐算法进行了研究,整理了近期混合音乐推荐引文的研究成果,提出了一种深度神经网络混合推荐模型,旨在解决上述问题。通过设置评估实验,对深度神经网络混合推荐模型的模型性能、预测精
随着现代经济的快速发展和我国财务分析体系的完善,对企业的短期偿债能力进行科学的评价分析变得越来越重要。短期偿债就是指利用企业流动资产来偿还到期的短期债务。企业在经营过程中,不能盲目追求企业盈利能力而忽略企业的经营偿债问题,更不能累积过多流动资产而造成闲置资金,使得企业的发展空间没有得到足够的利用。企业应当在保证短期的流动资金足以偿还日常债务的前提下,寻求更好的发展。在这样的情形下,对企业做出短期偿
学生对于老师的课堂教学进行评分是教学评价的常用方法,被广泛运用于各个高校,是考察教学质量的重要手段之一,对于评教数据的分析能有助于发现在教学中暴露的问题,从而有针对性的采取措施,引导教学与实践朝着正确的方向发展。本文采用重庆大学2011-2014级学生考试成绩数据和2011-2017年教学评价数据,分析学生评教分数和学生成绩之间的关系。首先使用方差分析比较不同的课程类型下学生评教的差异情况,发现对
网约车行业是典型的新兴行业,它的发展是伴随着移动互联网的进步以及智能手机的普及而进行的。网约车行业在我国诞生的时间虽然短暂,但其发展势头却不容小觑,如今几乎在我国各城市都能见到其踪影,这一新兴的出行方式也深受公众欢迎,已经发展成为我国客运行业的重要力量,深深地改变了民众的出行理念和出行习惯。但是在网约车行业的发展过程中,层出不穷的网约车侵权事件成为了社会关注的热点问题,与此同时,在网约车侵权事件中
伴随着互联网的快速发展,网络招聘平台成为获取招聘信息主要的途径。本文以人工智能行业岗位为例,对该岗位在全国范围内的线上招聘信息进行研究。本文的数据选取为前程无忧网站人工智能岗位的招聘信息,对于招聘信息中的结构型数据主要进行描述性分析,从而获得该行业相关岗位的基本概况;然后对图像处理、语音识别、无人驾驶三个岗位类别招聘信息进行分析挖掘。最后对招聘数据中的不同水平之间进行关联分析,挖掘不同水平之间的内
随着科学技术的不断发展,我们已踏入了“大数据”时代的大门,各种数据信息层出不穷,我们每天都在主动或被动的不断获取着关于这个世界所带给我们的方方面面的信息,在这一信息过载甚至信息爆炸的社会中,人们真正所需要的、所感兴趣的内容和信息的海洋相比也显得九牛一毛,在这种情况下,我们如果要在浩瀚的信息中搜寻到真正想要的内容往往要借助搜索引擎带给我们的帮助(百度、Google等)。但使用搜索引擎有一个不可避免的