面向真实场景的图像超分辨率算法研究

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:jovewu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为一个具有挑战性的不适定问题,图像超分辨率技术一直都是计算机视觉领域的研究热点,在社会生产生活的多个领域都有着极大的应用前景。得益于计算机硬件算力的大幅度提升和算法的进步,深度学习算法在图像超分辨率领域取得了最优的性能表现,但在真实场景中深度学习算法仍面临着诸多挑战。因此,本文聚焦于真实场景下的图像超分辨率算法进行研究。通过设计复杂度更高的神经网络架构和选取有效性更强的优化目标,基于深度学习的图像超分辨率算法性能不断地提升。但由于现有算法的泛化性能较差,在处理真实场景下复杂且未知的退化问题时性能会急剧下降。针对以上问题,本文提出了一种空间可变退化的图像超分辨率网络。空间可变模糊核估计模块为超分辨率网络提供了一个像素级的空间可变模糊核估计,使网络不仅能处理不同图像之间退化情况不同的问题,也能解决同一幅图像内部不同区域退化情况不一致的问题。此外,为了充分利用模糊核估计模块所提供的退化信息,本文在网络的每一个残差块中加入了仿射变换层以调整网络中的特征参数,进而获得更高质量的重建图像。实验结果表明,本文算法在处理真实场景下复杂且未知的退化问题时性能表现优于经典SR算法。对图像的像素级空间可变模糊核估计赋予了网络强大的处理不同退化的能力,有效解决了真实场景中复杂且未知的退化问题。然而,显式的像素级模糊核估计在一定程度上增大了网络的复杂度。针对以上问题,本文采用无监督对比学习训练了一个编码器以学习图像的抽象退化表示,以抽象的特征作为网络识别不同退化情况的依据。为了充分利用该退化表示信息,在网络的每一个残差块中采用了自适应特征调整层以调整网络中的特征参数。实验结果表明,该算法在减小网络复杂度的同时,定量的PSNR指标在不同的测试集上相较于传统算法最高有9%的性能提升且主观的视觉表现也优于传统的SR算法。
其他文献
高光谱图像(Hyperspectral Image,HSI)包含数百个窄而连续的波段,在地物探测、目标检测和农业生产中得到广泛应用。近些年,基于注意力机制的深度学习方法在HSI分类中展现出良好的性能,但在池化策略和捕获方向依赖性方面仍存在一些问题,本文为此开展了如下研究工作:1.针对传统通道注意力机制在池化时均等对待所有像素的问题,提出了一种端到端的基于概率邻域池化的注意力网络(Probabili
学位
索引调制(Index Modulation,IM)技术利用通信系统中某些资源的激活状态传送附加信息位,希望在不增加硬件成本的情况下提高系统频谱效率。可重构智能表面(Reconfigurable Intelligent Surface,RIS)作为一个由大量低成本无源反射元件组成的超表面,可在不增加发送信号功率的同时对无线传播环境进行智能重塑。将IM技术与RIS技术进行融合,通过控制RIS反射单元或
学位
对话交流是自然人表达情感的主要方式之一,分析文本对话中的情感是实现人机设备智能化、情感化的关键步骤。然而,由于自然对话内容的多样性、人类情感的多变性,现有文本对话情感分析方法存在深层语义信息利用不足、不同类型特征交互不充分等问题。为此,从语境上下文和社交背景信息出发,通过层次特征的高效提取与交互融合进行研究。1.针对对话语境中提取上下文特征与细粒度特征时存在的矛盾,不同层次信息交互不足的问题,提出
学位
视觉同时定位与地图构建(Visual Simultaneous Localization and Mapping,VSLAM)利用相机在无先验信息的环境中同时定位机器人和构建环境地图,以保障移动机器人能够实现完全自主运动。大多数视觉SLAM系统仅使用点特征来获取视觉信息,但前提是必须有理想的光照和纹理条件,这样才能获取足够的环境信息。所以,光照变化明显和弱纹理等复杂环境下的基于特征点法的视觉SLA
学位
行为识别是视频理解领域的重要基础任务,因其极高的应用价值吸引了越来越多的关注。现有主流行为识别方法主要应用于可见光视频领域,而红外视频领域的研究相对较少。然而,在一些特殊场景下,可见光视频会因为自身成像特性难以获得较好的图像质量。例如,在低光照环境中,场景中发生的行为即使是人工辨别也有一定难度。相对于可见光视频,红外成像视频具有对光照环境不敏感、抗干扰能力强等特点,能够在低光照环境中得到较好的成像
学位
为了得到更好的焊接件,解决在电子束焊接中焊件间焊接角度无法调整的问题,设计出可方便调节两个采用直线形运条法焊接的钣金零件的焊接角度的定位装置,重点对夹持部位进行分析,得到合理的设计方案,进而使两个零件的焊接工作更精确。同时,为了得到其所能夹持的零件的最大重量,对夹持部位进行仿真,进行应力应变分析,得出所能夹持最大重量是36.3kg。验证了此汽车钣金焊接定位装置在实际工作中有提升焊接工作效率的意义。
期刊
在公众运输管理领域,对行李实施X光安检是保障乘客生命财产安全的重要方式,但安检人员以肉眼观察图像来确认威胁物品易受人为因素影响且效率较低。深度学习是提升威胁物品检测精度的有效手段。然而,大多数检测方法仍存在提取特征质量较低,多阶网络层交互能力不足的问题。本文通过强化网络模型特征提取和多层语义信息交互能力来提升威胁物品分类精度和检测效率,主要研究内容如下:1.提出了浅层多头空间注意力机制、深层多头通
学位
云无线接入网(Cloud Radio Access Network,C-RAN)的出现为物联网(Internet of Things,Io T)应用的快速发展提供了有力支持。然而,在C-RAN中,业务请求的突发性和信道的突变性使得用户难以获得确定性的服务。具体地,在上行任务卸载过程中,为了保障能量有限的感知终端对数据速率和时延的要求,从而保障用户的服务质量(Quality of Service,Q
学位
随着移动互联网的快速发展,用户对无处不在的通信需求愈发强烈,这给当前主要依赖地面通信的网络带来了相当大的挑战。一方面,地面网络的基础设施在自然灾害中易受到破坏;另一方面,地面网络在偏远或远洋等区域部署困难。为给用户提供全球覆盖的通信服务,将天、空、地结合的天地一体化网络应运而生。传统的TCP/IP架构应用到天地一体化网络中会导致内容交付效率低,而利用信息中心网络对内容命名和网内缓存的特征,用户可以
学位
在认知无线电网络中,协作感知用户的感知意愿对于次要用户未知,往往造成信息的非对称。合同理论技术的提出能很好的解决信息非对称问题,该技术主要是通过提供一份所要求的绩效和相应报酬的合同来有效地激励员工。在雇员个人理性约束和激励相容约束下来最大化雇主收益的目标函数。运用区块链的不变性、透明性、去中心化和安全性等特性,将其作为认知无线电系统中交易双方的分布式账本,以达到去除第三方的机构参与,降低单点故障的
学位