面向真实场景的图像超分辨率重建算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:moniter2001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像作为人类生产生活中不可或缺的信息载体,扮演着至关重要的角色。真实场景中的图像常常受到成像器材以及成像环境的制约,分辨率往往无法满足观看的要求。超分辨率重建技术旨在从一张或多张模糊的低分辨率图像中重建出对应的高分辨率图像,从而实现图像分辨率的提升。本文基于真实场景下的未知模糊核盲超分问题、非配对数据半监督模型和超分辨模型轻量化,针对相应的科学问题提出了三个超分辨率重建算法,主要研究工作概括如下:1)提出一种基于模糊核自估计迭代的图像盲超分辨率模型。现有主流盲超分辨率算法主要通过固定模糊核构建配对的数据集,但同时会把该模糊核用来指导模型训练,然而真实盲超分辨率场景中的模糊核是未知的,因此不能将已知模糊核当作监督信息指导算法训练。针对这个问题,设计了两个模块:图像迭代还原模块和模糊核自估计模块。首先初始化一个模糊核,图像迭代还原模块利用该模糊核的降质信息,与低分辨率图像中的多层信息进行特征融合,辅助网络重建出清晰的高分辨率图像,然后模糊核自估计模块学习高、低分辨率图像的失真差异来估计模糊核,并通过自监督学习更新该模糊核,图像迭代还原模块则继续结合更新后的模糊核还原高分辨率图像,反复交替迭代这两个模块,实现模糊核迭代估计与图像迭代重建。在合成数据集和真实图像上进行的大量实验表明,该算法优于多数最先进的算法,并有更直观的视觉效果。2)提出一种基于可逆网络的非配对图像半监督超分辨率模型。现有主流非配对超分辨率算法将图像降质与重建作为两个独立的域迁移过程进行建模,而本算法则是用可逆网络将图像降质与重建统一到同一个可逆网络中。具体来说,可逆网络的正过程是图像降质,将高分辨率图像转化为低分辨率图像和高斯分布,可逆网络的逆过程是图像重建,利用低分辨率图像和高斯分布,来生成对应的高分辨率图像,然后对这两个过程分别采用生成对抗网络去提高图像的质量与逼真度。同时本算法引入了质量指导模块,该模块会对重建图像进行质量评估,得到质量排名,通过反向传播使可逆网络生成质量排名更高的图像,在该模块的加持下,本算法重建的图像有着更高的质量分数表现以及更好的视觉体验。在真实图像上进行的大量实验表明,本算法优于最新非配对超分辨率重建算法,并且有更直观的视觉效果。3)提出一种基于残差蒸馏网络的轻量化超分辨重建模型。现有的轻量化超分辨率模型主要通过削减网络模块数和通道数来减少参数量,但这会降低网络结构的表征能力,影响网络对图像特征信息的提取与运用。本算法首先提出了残差蒸馏结构,该结构在网络提取图像特征的同时,对特征自身进行信息蒸馏,实现了网络中间特征的轻量化,进而降低网络参数量,且蒸馏特征有助于提升重建图像质量。此外,本方法利用通道间的长依赖关系,对通道互相关性进行建模,实现了网络对不同通道的不同关注度,进一步提高网络表征能力。实验证明基于残差蒸馏网络的轻量化超分辨率重建算法在重建图像质量和模型资源消耗上都要优于大多数主流算法。
其他文献
随着移动电子设备及物联网的飞速发展及广泛应用,用于数据存储的存储器有巨大的应用前景,但也面临着严峻的挑战。阻变存储器是非易失性存储器中极具代表性的一种,有望取代现下应用最广的闪存。氧化锌(ZnO)被誉为最有潜力的电阻存储材料,其阻变层导电细丝的形成和断裂控制数据写入和擦除。导电细丝的形成伴随着晶体结构及原子迁移势垒的变化。本文通过构建原子级的理论计算模型,采用以密度泛函理论为基础的第一性原理计算方
随着大数据技术的快速发展与数据量的飞速增长,海量数据的挖掘与分析成为现阶段的研究热点,数据可视化作为最直观有效的数据分析方式,被国内外各领域的数据处理业务所热衷。而现阶段市场上存在的绝大多数数据可视化平台具有领域单一性,即仅聚焦于特定应用模式数据的可视化效果,例如量化数据的多维展示、知识图谱的实体-属性呈现等。现存少量的数据分析平台可提供完备的数据分析方式,但其繁琐的功能需要大量学习成本,易用性程
随着几何造型工业的迅速发展,传统的Bézier方法、B样条方法以及NURBS等方法已经难以满足造型设计中的各种需求。作为传统Bézier方法的扩展,带形状参数的广义Bézier曲线曲面如今已经成为CAGD领域研究的新热点。这类曲线曲面通过引入形状参数,提高了其局部和整体形状的可调性。造型软件中的复杂几何体通常是由满足几何连续约束的低次曲线曲面光滑拼接而成的,因此研究带参广义Bézier曲线曲面的几
当前,我国公路货物运输安全状况趋于好转,但形势依然严峻。本文从运输安全事故发生的原因入手,深刻剖析存在问题,并在货物运输驾驶员、运输企业、监管部门等方面提出了建议,对建设平安交通,保障公路货物运输安全,促进运输业健康持续发展具有指导和现实意义。
随着中国制造2025战略的实施,以及我国智慧矿山建设的不断推进,井下机电设备联系日渐紧密,并向着自动化、智能化的方向快速发展,这对煤矿的安全生产提出更高的要求。异步电机作为煤矿作业的核心驱动力,其能否在恶劣的环境下可靠工作将会直接影响到生产的稳定性。开展井下异步电机故障诊断研究对发现电机早期故障、防止故障范围扩大、保障煤矿的高效生产具有重要意义。本文首先从电磁学角度对异步电机转子断条故障、静态气隙
空化是液体介质在局部压强剧烈变化时发生相变的现象,空化现象广泛地存在于各种液体流动中。向液体介质中加入可溶性高分子聚合物可以得到具有粘弹性性质的聚合物溶液。本文基于CFD商业软件,对聚合物溶液中的空化现象进行仿真模拟,研究聚合物添加对空化现象的影响规律。数值模拟中采用FENE-P模型描述聚合物溶液的粘弹性特征,同时应用混合多相流(Mixture)模型模拟流场中的空化现象。本文分别应用雷诺平均模型(
城市更新是推进城市高质量发展的重要举措,是节约集约利用土地的基本途经,更是改善城市居民生活环境、美化城市空间风貌的惠民行动"十四五"规划纲要提出:加快转变城市发展方式,统筹城市规划建设管理,实施城市更新行动,推动城市空间结构优化和品质提升。城市更新是将城市中已经不适应现代化社会生活的地区作必要的、有计划的改建活动,旨在完善城市功能,优化产业结构,推进土地资源的节约集约利用,
期刊
随着科技的发展,机器人已经在诸多领域得到了广泛的应用。传统的轮式以及履带式机器人,由于其结构本身的限制,导致它们的运动往往需要连续的支撑面,因此难以应对较为复杂的非结构化地形,如沟壑、陡坡。相比于传统的机器人构型,足式机器人的运动只需要离散的支撑面,因此具有更好的地形适应性。而离散支撑面具有高度和间距不断变化的特点,传统的步态规划方法往往难以适用。因此,本文对仿人机器人在离散支撑面下的步态规划和自
生态补偿机制是新时代生态文明建设的重要内容,不断发展的森林生态旅游,既给旅游地生态环境保护带来了资金支持,又给旅游地的生态环境造成了一定的损害。因此有必要建立健全森林旅游生态补偿机制,并探索以市场化经济工具辅助实现森林旅游生态补偿的目的,以法律制度的形式将森林旅游生态补偿的概念、范围以及多元化的方式等予以明确规定,为我国森林旅游生态补偿形成长效实施机制提供法律保障。
近年来,随着用户和法规对工程机械舒适性要求的日益提高,国内工程机械厂商正面临着降低产品振动的挑战。本文针对某厂商的一款轮式装载机存在的两类典型振动问题展开研究,以期采用科学的分析方法明确振动问题的机理,优化并降低该款装载机的振动水平,为类似问题形成有参考价值的分析方法及解决案例。针对怠速状态座椅振动过大问题,建立了座椅振动传递路径模型并实施了工况传递路径实验,从相干分析和响应合成两方面验证了分析模