精确与高感知质量的单幅图像超分辨率问题研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:lmmak
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像超分辨率的目标是依据低分辨率图像重建出其高分辨率的版本。目前,图像超分辨率在安防监控、医疗图像、遥感图像等多个领域起到了重要的作用,成为研究的热点。本文提出了三种不同的深度卷积神经网络来对单幅图像超分辨率问题进行研究。图像超分辨率是一个经典的病态问题,充分地利用低分辨率图像中的信息是生成高质量图像的关键。尺度信息和网络的层级信息则是图像的重要信息,为了更好地利用这些信息,论文的第二章创新性地提出了多尺度和多层级密连接融合的超分辨率网络(Multi-Scale Residual Hierarchical Dense Networks,MS-RHDN)。其中,多尺度提取结构结合残差连接和ASPP(Atrous Spatial Pyramid Pooling)结构提取出图像的多尺度特征。层级密连接结构用多层次的密连接提取全局和局部的层级特征并进行融合。另外,次密连接模块自适应地从密连接特征中学习出重要的信息。最后,为了稳定神经网络的训练以及提高网络的性能,网络中引入了多个不同的跳跃连接。基于逐像素损失的超分辨率网络会生成模糊平滑的边缘,丢失大量的高频细节信息。论文的第三章提出了两种新型的生成式对抗网络来减小生成图像分布与真实分布之间的距离。传统的生成式对抗网络中判别网络对生成网络的影响在于判别损失,这个损失是整体的、粗糙的。论文提出了一种细粒度注意力机制的超分辨率网络(Fine-grained Attention Generative Adversarial Networks for Image Super-Resolution,FASRGAN)。FASRGAN利用Unet结构的判别网络生成细粒度的判别监督,并将该监督应用到生成网络当中,让生成网络关注到重建困难的部分。此外,传统生成对抗网络中的生成网络和判别网络通常是两个独立的网络,论文采用了协同的机制将生成网络和判别网络的浅层特征提取部分协同,减少网络参数,提高模型提取特征的能力。在移动设备中应用超分辨率神经网络具有重要的意义。本文第四章提出了一种新型的轻量级超分辨率网络(Small Feature-Size Networks for Image Super-Resolution,SFSRN)。SFSRN用desubpixel的方式将图像的空间尺寸进行缩小,然后对小的特征图进行深层次特征提取,极大地减少了模型的计算量。实验结果证明本文方法比其他轻量级模型更加有效。此外,本文第四章进一步利用NTIRE 2019中的真实超分辨率训练数据对网络进行训练,并基于TensorFlow Lite架构,将轻量级神经网络部署到移动设备中。在五个标准的数据集上与当前流行方法的定量对比和视觉对比,证明了论文提出方法的有效性和优越性。实验中还将论文提出的方法和对比方法生成的超分辨率图像作为物体识别网络中的输入,计算模型的识别率。本文方法具有最低的top-1错误率和top-5错误率,进一步证明了论文提出的模型强大的重建能力和优秀的超分辨率效果。
其他文献
近年来,"主持人热"一直不断升温,电视荧幕出现了许多明星主持人。主持人明星化现象是电视节目适应商业社会发展的必然产物,本文就主持人明星化的定义,包装塑造的手段和意义进
<正> 上海别克君威乘用车上配置了倒车辅助系统,其倒车辅助系统的控制电路如图1所示。1 系统的组成和功能该系统由装在后保险杠上的四个探测头,安装在后车窗装饰衬板上的倒车
利用垂直流串联水平潜流的组合人工湿地处理污水处理厂尾水,比较有植物和无植物组合湿地对磺胺类抗生素母体及N4乙酰代谢物的去除效果。结果表明:有植物组合湿地的去除效率为
支付系统作为中央银行向商业银行和货币市场提供的公共支付清算平台,承载着各种跨行支付业务和货币市场交易的资金清算功能,是国家支付体系的中枢。支付系统的资金流动性管理,是
<正>会计信息不仅是衡量一个企业健康与否的重要标志,也是股东考核管理者的重要指标之一。但在实务中,会计信息成为企业管理者操纵经营成果和应付上级主管部门的工具,并未起
目的调查龙川县育龄妇女地中海贫血的携带率、基因突变类型及构成比。方法选取2013年1月-2018年12月于龙川县妇幼保健院初次产前检查的育龄妇女78 000例进行血常规初筛,初筛
全面预算管理是降低有色金属企业成本、加强产品低成本战略、提高产品核心竞争力的有效途径。文章以株洲冶炼集团股份有限公司为例,通过全面预算管理的应用,从预算组织、预算
本研究收集珲春-汪清地区东北虎(Panthera tigris altaica)(2011-2016)和东北豹(Panthera pardus orientalis)(2011-2014)粪便样本,经筛选后,得到拥有猎物种类信息的东北虎粪
目的摸清建平县所辖鼠疫自然疫源地鼠间疫情,以便采取有效地防制措施.方法应用流行病学调查、间接血凝吸附试验和家野鼠密度调查等方法.结果从241份鼠血清样本中,检出阳性血
期刊