融合低秩建模与深度学习的图像复原问题研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:wallen5202
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为信息交流的重要载体之一,图像在人们日常生活中扮演着重要的角色,且已经被广泛应用于疾病诊断、军事监测和矿产勘探等多个领域。随着互联网和多媒体技术的飞速发展,图像的获取也变得越来越容易。然而,图像在获取的过程中往往会受到成像机理、成像设备和成像条件等限制,使得图像中存在各类退化现象,这不仅降低了其视觉质量,而且严重限制其在后续应用中的实用价值。图像复原旨在从降质图像中估计反演真实场景的清晰、高质量图像,是目前数学与信息交叉科学研究的重点和难点问题之一。本文从先验知识刻画、模型指导网络设计以及提高泛化性等角度出发,研究融合低秩建模与深度学习的图像复原方法。建立相应图像复原模型并设计高性能求解算法,在提升模型性能的同时兼具良好可解释性、泛化性和稳定性。具体研究内容、成果和创新点概括如下:一、针对之前条带噪声去除方法对实际场景中复杂条带的先验知识刻画不足的问题,提出了基于剪切低秩和加权块稀疏正则的遥感图像条带噪声去除模型。通过深入挖掘条带噪声的特征,设计了新的、更灵活的能够区分复杂条带和干净图像的正则,并在此基础上建立了相应图像复原模型。通过引入辅助变量使用具有收敛性保障的交替方向乘子算法将整体求解困难的优化问题转化为了多个容易求解的子问题,进而有效地求解提出的模型。通过大量的数值试验表明,与现有条带噪声去除方法相比,提出的方法不仅提升了条带噪声的去除性能,而且大幅度地提高了图像的视觉质量。二、考虑多维视觉数据的空间多尺度特征和各个维度的冗余性(全局相关性),提出了一种基于耦合变换的新型低秩张量表示方法。该表示方法以一个多层次的视角研究数据内部机制以挖掘数据的隐式低秩结构。并将提出的低秩张量表示方法应用于多维视觉数据填充问题,建立了相应的低秩张量填充模型。针对所建模型的结构特点,设计了基于交替方向乘子法的求解算法,并理论上证明了该算法的收敛性。大量的数值试验表明,数据空间多尺度信息的挖掘对于图像复原方法的性能至关重要,提出方法能够更好的复原图像的细节,其性能优于经典的张量填充方法。三、在“研究二”的基础上,考虑到传统线性表示方法的表达能力有限以及对全局相关性捕捉能力不足等问题,提出了一种基于耦合非线性变换的新型低秩张量表示方法。设计了相应的卷积神经网络结构作为耦合非线性变换,它可以以无监督的方式仅从观测数据中学到。将提出的低秩张量表示方法应用于多维视觉数据填充问题,建立了相应的低秩张量填充模型。针对所建模型的结构特点,设计了基于梯度下降法的求解算法。此外,为进一步挖掘数据的空间多尺度特征,提出了一个具有U-Net网络结构的增强版本。大量的数值试验表明,提出的方法在多维视觉数据全局结构和局部细节信息的复原能力上均优于经典的张量填充方法。四、为了解决由于动态前景的存在而难以用单一先验来刻画复杂视频的问题,提出了一种融合低秩背景先验和深度前景先验的复杂视频填充模型。具体而言,提出的方法首先将复杂视频分解为动态前景和静态背景两部分,然后利用U-Net网络结构表达的深度图像先验来捕捉动态前景,利用张量低秩先验来刻画静态背景的全局相关性。针对所建模型的结构特点,在即插即用框架下设计了基于交替方向乘子法的求解算法。该算法可以在迭代过程中自适应的更新网络参数,使得网络具有更灵活的表达能力。大量的数值试验表明,在复杂视频填充问题上,提出的方法与经典的张量填充方法相比更好的复原了数据的细节和纹理结构。
其他文献
多输入多输出(Multiple Input Multiple Output,MIMO)雷达具有空间分集增益和波形分集增益,能够为目标参数估计带来一定性能改善。经典MIMO雷达估计理论通常依赖于正交发射信号、空间不相关目标反射系数以及白噪声等一系列理想假设条件。然而近年来学术界和工业界逐渐发现,完美正交发射信号难以实现,由此还可能引发空间相关噪声。类似的问题也出现在MIMO雷达与外辐射源雷达、雷达通
目前,基于P型栅的增强型氮化镓高电子迁移率晶体管(P型栅Ga N HEMT)是实现高效、高频、高温功率变换的一种良好方案,且其凭借在成本、性能、可靠性等方面的优势,已进入商业化应用。但在P型栅Ga N HEMT功率器件应用过程中,仍面临功耗模型精度较低和诸如静电放电(Electro Static Discharge,ESD)可靠性等方面的问题。本文针对P型栅Ga N HEMT功率器件在面向应用过程
近年来太赫兹技术在军事保密通信、高分辨率成像、高精度无损探测等多个重要领域的应用备受关注,太赫兹系统应用的高增长极大的刺激了高性能太赫兹器件与电路的需求。太赫兹固态技术是实现高频率、高集成度、高可靠性系统的重要基础,半导体器件是太赫兹固态技术得以快速发展的关键因素,其中以磷化铟双异质结双极性晶体管(InP DHBT)最具有代表性:InP DHBT具有优异的高频特性及功率特性,是目前太赫兹固态技术领
河口湿地因其独特的海陆交汇区位、生态脆弱性和环境梯度异质性,成为全球变化的敏感区。河口湿地同时受陆地和海洋的双重调控及径流-潮流影响,生物组成多样,食物网结构复杂,是营养级联效应的典型生态系统。作为敏感的生态系统,河口湿地受到自然和人为因素的双重影响,堤坝建设、人为恢复活动、石油开采和外来物种入侵等,都导致自然水文连通度、连通方式和水文节律的改变,造成生态系统退化,生物多样性锐减,影响河口湿地结构
水稻驯化是人类活动影响下的生物进化过程,与人类生存息息相关。阐明水稻驯化驱动的根际微生物组群落结构和功能变化规律,进而应用于改良、重组和构建栽培稻根际微生物组是农业发展重要增长点。现代栽培稻包括亚洲栽培稻(Oryza sativa)及非洲栽培稻(O.glaberrima),由不同的野生种驯化而来,且独立起源于亚洲和非洲。本研究共以12种具有遗传关系的野生稻及栽培稻品种为研究对象,通过长期定位试验及
水稻孕穗期低温胁迫会破坏生殖器官功能,使花药发育受损、花粉育性降低,最终导致水稻结实率下降、产量降低。黑龙江省是我国重要的水稻商品粮区,水稻产量约占全国的1/9。黑龙江省是我国最北部的水稻种植区,孕穗期冷害频繁发生,严重的威胁了当地水稻的生产。由于孕穗期耐冷表型鉴定上存在困难,目前只有少数孕穗期耐冷基因被鉴定出来。因此,挖掘更多的孕穗期耐冷基因,解析其调控机制具有十分重要的现实意义。本研究鉴定到了
聚类分析是一种重要的数据挖掘技术。它的目标是挖掘数据中的簇,使得在同一簇中的数据比在不同簇中的数据更相似。研究者已经提出了一系列聚类算法并把它们广泛应用于图像分割、信息检索、数据压缩和生物信息学等领域。近年来,随着大数据、区块链和人工智能等一系列新兴技术的快速发展,在互联网、科学研究和工业生产等领域积累了大量复杂结构数据,比如形状不规则数据、密度不均匀数据等。聚类这些数据给传统的聚类算法提出了严峻
随着近年来物联网设备数量的爆发式增长,现有的正交多址接入(Orthogonal Multiple Access,OMA)技术,如时分多址接入、频分多址接入、码分多址接入等,已经无法满足未来无线通信网络对海量物联网设备接入和高频谱效率的需求。因此,亟需研究新型多址接入技术。与OMA技术相比,非正交多址接入(Non Orthogonal Multiple Access,NOMA)技术允许多个用户同时占
金刚石具有超宽禁带(5.5 eV)、高热导率、高本征迁移率、高击穿电场、高饱和速度、和低介电常数等特性,在微波功率和电力电子器件领域有着巨大的应用潜力。氢终端和硅终端是两种分别利用氢和硅原子修饰金刚石表面的终端技术,与其他终端技术相比,二者分别具有载流子浓度高和绝缘膜/金刚石界面质量好等特点。采用氢终端和硅终端金刚石作为器件沟道制成的金属-氧化物-半导体场效应晶体管(Metal-oxide-sem
位置信息作为数字世界和物理世界交互的泛在连接,提供了重要的感知信息,和人们的生产生活密切相关。近年来,位置服务的相关技术和产业正从室外向室内/地下等更加复杂的空间发展,以提供无所不在的基于位置的服务。然而传统的基于单一信源和参数化定位的方式面临着信号观测空间有限、多径干扰、非视距传播等棘手问题,环境适应能力、精度和稳健性都较差,迄今为止尚未有任何一种方案能够提供泛在、无缝、智能的定位服务。随着物联