多尺度子网络及结合先验信息的单幅图像超分辨率研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:zhongming328
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于数字图像采集设备体积、重量以及成本的限制,采集到的图像分辨率较低,这极大地降低了图像的清晰度。同时,人们对于高清晰度图像的需求日益增加。图像超分辨率是解决该需求的主要方法,其目标是通过算法将低分辨率图像重建为高质量的高分辨率图像。近年来,许多超分辨率算法利用大量的训练数据和复杂的深度神经网络来提高其重建性能。然而,仅有少数方法关注到了多尺度结构在分离和重建不同频率信息上的应用,同时大部分算法忽略了先验信息对于图像超分辨率重建的指导作用。对此,本文研究了多尺度子网络结构和图像先验信息在图像超分辨率重建任务上的应用,并开展了以下三个工作:(1)本文通过分析现阶段基于卷积神经网络的超分辨率算法,发现大量的深度模型使用残差连接和密集连接的方式来增加网络的深度以提升重建性能。这些方法往往采用单一尺度的网络模型进行特征信息的提取,存在特征提取过程中没有将高频信息和低频信息有效地进行划分的问题,而重建出低分辨率图像缺失的高频信息正是超分辨率任务的关键难点。为此,本文提出一种多尺度子网络模型,使用不同深度和尺度的子网络对图像中不同频率的信息进行提取和重建,同时利用自适应融合模块来提升不同频率信息的融合效果。(2)为了证明图像先验信息对于超分辨率任务具有指导作用,本文提出一种结合图像描述信息的超分辨率模型。该模型基于条件生成式对抗网络,同时将图像描述信息和低分辨率图像作为网络模型的输入,在生成器和判别器中均加入了图像描述信息以克服低分辨率图像有效语义信息缺失的问题。此外,该模型通过正负样本损失函数来增加重建图像和描述信息之间的关联性。(3)本文将人脸属性信息输入到人脸图像超分辨率模型中,以指导低分辨率人脸图像的重建,并提出结合人脸属性信息的图像超分辨率方法。与现有的人脸图像超分辨率方法不同,该方法将自编码器提取的面部结构信息和属性信息进行融合,同时通过残差连接和密集连接的结构克服深层神经网络训练过程中梯度消失的问题,从而构建了深层次的人脸图像超分辨率模型。以上三个工作所设计的网络模型,在测试数据上重建的超分辨率图像与现有主流超分辨率方法的结果相比,在客观评价指标和视觉观察上均有一定提升,并且相应的模型组件消融实验和分析实验进一步论证了模型的有效性。最后,本文所提出的三个基于神经网络的方法,提升了超分辨率重建的精度和感知度,具有一定的研究价值。
其他文献
林业机器人属于特种工业机器人,在复杂的林间作业环境中可以替代劳动者的工作,大大提高工作效率。颜色信息是物体最直观、最有效的表征,也是林业机器人视觉系统作业时获取的
本论文首先开展了油脂催化裂化制备生物基烃类的沸石分子筛类催化剂的筛选,然后对筛选出来的沸石分子筛催化剂进行金属改性与复合改性,并探索了改性催化剂对催化裂化反应的影响,优化其催化裂化的工艺条件,为进一步研究提供指导。论文的主要研究结果如下:(1)采用实验室自制小型固定床反应器,探究ZSM-5(硅铝比分别为25、38、50)、β、MCM-41以及HY六种分子筛催化裂化小桐子油制备生物基烃类的催化特性。
图像分类是目前图像研究领域一个重要课题之一,找到一种能对不同种类或者发生变化的图像数据集进行分类且都具有普适性和高效性的方法将是十分必要的。常用的图像分类方法有
在事业单位在体制改革的背景下,有一些地质事业单位尤其是拥有自然资源和远景的单位现在正在面临转型和改革。目前最新的机构配套改革方案已经出台,使其具备了良好的外部基础
星网锐捷通讯股份有限公司(以下简称:星网锐捷或集团)是国家首批创新型通讯设备制造企业,在网络、终端及云计算等传统市场领域保持领先优势,致力于为企业级客户提供信息化解
目的探讨MTA1-CK19信号通路对结肠癌转移的影响及机制。方法将结肠癌HCT116细胞分为对照组与干扰组,利用RNA干扰技术结合转录组测序(RNA-seq),分析对照组与干扰组基因表达的
"十四五"时期实施就业优先战略有着重大的现实意义:破解就业总量压力和结构性矛盾难题、增进民生福祉、构建新发展格局,都需要大力实施就业优先战略。与此同时,稳就业还面临
第一部分:POF/POI患者血清雄激素水平的系统回顾和荟萃分析及与同期生育年龄妇女的比较目的:有关POF/POI患者血清雄激素(4个评估指标:睾酮、硫酸脱氢表雄酮、雄烯二酮和性激
随着行业的快速发展,太阳能-空气源热泵热水工程逐步成为大中型热水工程的主流。但是现阶段大部分控制器仍然采用简单的逻辑控制,能效比低下。如何提升太阳能利用率以保证太
为了完善辽宁省省直事业单位的养老保险体系,实现社会公平,建立多层次的养老保障制度,进而推进辽宁省原有事业单位养老制度的改革,建立除基本养老保险制度之外的补充养老保险