稀缺样本下基于深度学习的图像超分辨率方法研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:bisha1007
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像数据作为数字化信息时代重要的信息载体,是人类了解和认识世界的最重要途径。图像分辨率是评价图像质量的重要指标,图像分辨率代表了图像包含信息的丰富程度,高分辨率图像提供更多物体的细节信息。但在对物体成像过程中,受到成像仪器、拍摄环境等因素的影响,成像过程中往往丢失了许多细节信息,难以满足实际的生活生产应用的需求。超分辨率重建技术作为一种基于软件的图像后处理技术,能够在不更新硬件设备的前提下提高图像的分辨率。因此,超分辨率重建技术在日常生活、视频监控、遥感测绘和医学诊断等领域都有着重要的研究价值与意义。目前超分辨率重建算法的研究对象主要为二维图像。从算法原理上讲,可以分为基于插值、基于重建和基于学习三大类超分辨率算法。基于插值的超分辨率算法通过已知像素在高分辨率栅格的空间关系估计出缺失像素的灰度(或色彩)。基于重建的算法将超分辨率看作一个优化重建误差的问题,通过引入了先验知识来得到局部最优解。相对于前两类算法,基于学习的超分辨率算法通过建立学习模型隐式地学习图像的先验知识,从而得到更好的超分辨率效果。但基于学习的算法需要大量的高分辨率的样本来训练学习模型。本文主要研究不同维度图像数据如二维流形和三维医学影像的情况,二维流形数据反映的是实际三维物体的表面信息,若将二维流形投影到二维空间,表面的高度便看成图像的灰度值,但这类数据高度动态范围非常大;而三维医学影像含有三个维度,数据复杂度明显要比二维图像高得多。对于这两类图像数据,都难以收集到足够多的样本来训练一个鲁棒的学习模型。针对上述问题,在二维图像的超分辨率研究算法的基础上,本文重点研究在稀缺样本情况下基于学习的超分辨率算法,对不同维度的图像数据,提出了三种不同的超分辨率算法来重建高分辨率图像数据。首先,提出了基于邻域嵌入(Neighbor Embedding,NE)和自相似性(Self-similarity)的二维图像超分辨率算法。该算法通过充分挖掘图像内部存在的多尺度和多角度的相似性,建立高低分辨率的图像块之间的映射关系,同时设计了一种基于局部先验知识的增强策略来进一步提高超分辨率精度。实验采用了自然图像和核磁共振(Magnetic Resonance,MR)图像来验证算法的可行性和先进性。其次,提出了基于梯度先验网络和迁移学习的二维流形超分辨率算法,并用于数字高程模型(Digital Elevation Model,DEM)。该算法提出了梯度域上的超分辨率和迁移学习两个措施来将图像知识迁移到DEM超分辨率问题中。首先通过迁移学习的手段来减少DEM超分辨率用网络训练所需要的样本量;同时,考虑到DEM数据连续性好,该算法通过实现梯度域上的超分辨率来缩小自然图像和DEM数据的差异。最后,基于梯度域和高度域上的约束来重建DEM数据。实验表明上述框架能够在有限的样本下保证DEM的超分辨率精度。最后,提出了基于多通道二维卷积神经网络的三维超分辨率重建算法。对于三维超分辨率重建问题,其目的是为了减小三维数据的层厚,提高层间分辨率。作者通过设计了一种多通道的网络结构,将邻域的序列图像同时引入到二维图像的超分辨率重建过程中,从而保证了局部连续性;同时为了保证全局一致性,该算法将不同层面的超分辨率结果融合来重建最终的各向同性数据。实验表明了该算法能够取得更好的重建质量,为解决稀疏样本下高分辨率图像重建问题提供了有效的途径。
其他文献
阅读的重要性一直都备受瞩目。阅读教学在高中英语教学中占有重要的地位,阅读能力的培养是高中英语教学的重中之重。但实际上,高中英语阅读教学正面临着许多问题,严重的影响
随着近年来社会经济的不断发展,农作物的输出方式也不断地创新,目前,大量的盆栽蔬菜为社会的发展增添了不同的色彩,通常情况下,传统的蔬菜种植都是在地里进行,然而随着社会发
随着节能环保理念的盛行,将这一理念引入到园林绿化中已经是势在必行的了。以节能、节水、节土、节地为主要实施手段的节约型园林绿化能够做到园林绿地的可持续循环利用。本
怀素是中国书法史上最伟大的狂草书法家之一,在唐代其草书艺术与张旭齐名,并称“颠张醉素”,影响后世乃至今天书法艺术的发展,唐以后受怀素书风影响最大的名家有黄庭坚、祝允
准时制采购是一种先进的管理理念和采购方法。实现准时制采购战略,可以提高供应链对市场需求的响应速度,构筑整个供应链及各个节点企业的核心竞争力。文章通过对准时制采购与
利用全细胞膜片钳技术,观察不同浓度地塞米松急性灌洗大鼠肾上腺嗜铬细胞(AMCC)后钙通道电流和烟碱受体通道电流(INIC)的变化,地塞米松对大鼠AMCC的急性作用为明显抑制INIC而
<正>根据国务院印发的《物流业调整和振兴规划》要求,国家发改委编制了《农产品冷链物流发展规划》(以下简称《规划》),于日前正式印发。《规划》在分析我国当前农产品冷链物
<正>河南赵先生问:什么是婚前财产公证?答:婚前财产公证是指公证机构根据当事人的申请,依法证明夫妻或未婚夫妻双方就各自婚前财产和债务的范围以及权利的归属所达成的协议真
课前预习在整个学习过程中的重要性是毋庸置疑的,实际上课前预习也是学生自学的起始阶段,是培养学生独立自学能力的必要步骤。通过课前预习学生可以得到获取知识的主动权,学
现如今,人们越来越注重地球资源的消耗所带来的环境污染问题,传统能源的持续消耗已经不再符合当今社会的发展趋势,开发清洁的可再生能源刻不容缓。随着光伏产业的持续发展,太