基于深度学习的图像超分辨率重建算法研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:qq174548079
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数字图像是智能媒体时代的主要传播媒介之一。然而,由于图像在获取、压缩和传输过程中容易遭受不可避免的损失,使得实际场景中获取的图像质量降低。图像超分辨率重建是计算机视觉和图像处理领域中的一个经典底层任务,旨在从对应低分辨率图像中生成包含高频细节的高分辨率图像。随着深度学习技术的快速发展,基于卷积神经网络的超分辨率重建方法已被广泛应用于各种研究领域,如医学成像、遥感成像、公共安全、自动驾驶和智能显示等。虽然基于卷积神经网络的图像超分辨率重建算法取得了不错的实验性能,但在实际应用过程中仍然存在许多亟待解决的挑战性问题,例如:无引导图像超分辨率重建任务中模糊核预测精确度低与退化方式不一致问题、引导图像超分辨率重建任务中引导图像信息迁移不佳问题。针对上述问题,基于卷积神经网络的强大学习能力,开展对图像超分辨率重建算法的研究与探索。具体研究内容主要包括:现有的无引导图像超分辨率重建任务中的模糊核估计算法一方面需要在测试阶段迭代优化训练,导致消耗时间过长;另一方面基于低分辨率图像空间域对模型进行优化,使得预测模糊核的准确度欠佳。针对上述问题,提出了一种基于模糊核空间域优化的模糊核估计网络,减少由间接优化方式造成的估计误差。此外,网络模型基于一个自适应注意力损失函数训练优化模型参数,增加对模糊核空间中退化影响程度更高区域的关注度。实验结果表明,所提出的模糊核估计网络不仅可以得到精确的模糊核,而且可以与针对多种退化方式的图像超分辨率重建网络模型相结合获得先进的盲图像超分辨率重建性能,其模糊核估计和超分辨率重建的峰值信噪比分别至少提高了13.58dB与0.89dB。现有的基于卷积神经网络的超分辨率重建算法大多假设退化方式是已知且固定的,如双三次插值下采样退化。然而,当实际退化方式与训练退化方式不匹配时,算法模型的重建性能遭受严重下降。针对上述问题,提出了一种基于前置校正网络的盲图像超分辨率重建网络,使得基于单一固定模糊核训练的超分辨率重建网络同样适用于其他未知模糊核。具体而言,前置校正网络由模糊核估计网络、校正滤波模块和校正优化网络组成。模糊核估计网络从输入低分辨率图像中预测未知模糊核;校正滤波模块根据预测得到的模糊核校正输入图像使其服从特定退化分布;校正优化网络调整滤波输出图像,消除模糊核误匹配或误估计的影响。在不同数据集上的实验结果表明,所提出的前置校正网络与针对单一退化方式的图像超分辨率重建算法相结合获得了先进的盲图像超分辨率重建性能,其峰值信噪比至少提高了0.72dB。目前主流的引导图像超分辨率重建任务中的算法模型大多单方面地将引导图像中的高频结构信息迁移到目标图像中,忽略了引导图像与目标图像之间的对应关系。针对这一问题,提出了一种基于双自编码器注意力网络的引导超分辨率重建算法。该算法模型主要包括两个子网络模型,其中引导自编码器网络用于重建高分辨率引导RGB图像,同时提取高频结构特征迁移到目标自编码器网络中;目标自编码器网络融合高频结构特征并重建高分辨率深度图像。具体而言,所有的自编码器网络采用相似的网络结构,并同时进行训练,以确保结构一致性。此外,在模型中引入注意力机制来增强高频边缘区域的特征提取。实验结果表明,所提出的双自编码器注意力网络模型取得了先进的引导超分辨率重建性能,其均方根误差至少减少了0.17。
其他文献
第一部分:4D flow MRI评估健康成人颈动脉血流动力学在不同年龄和解剖部位的变化目的:利用4D flow MRI技术评估不同年龄和解剖位置的健康成人颈动脉血流动力学变化,并探讨其对颈动脉疾病的影响。材料与方法:共纳入了62名年龄在20岁到70岁之间的健康志愿者。对每个受试者行4D flow MRI检查,测量不同解剖位置(近端颈总动脉,远端颈总动脉,近端颈内动脉和远端颈内动脉)的血流动力学参数
学位
中医药在疾病预防与治疗、健康养生等方面参与面广、参与度深、认可度高,展现出独特作用,彰显了民族传统文化的时代价值。为发挥中医药文化在中医药事业发展中的先锋作用,依托新形势下中医药文化宣传教育的时代机遇,剖析现阶段中医药宣传教育过程中存在的宣传内容科学性不够、宣传队伍专业性不强、宣传对象针对性不高、宣传平台多样性不足等问题,探索增强中医药文化教育宣传的创新策略。立足健康中国战略,打破中医药文化宣传教
期刊
多联机空调系统由于安装不当或长期运行后设备老化,不可避免地会出现各种故障,造成能源浪费。此外,系统故障运行还会加速设备部件的损坏,显著降低使用寿命,带来较大的经济损失。因此,建立可靠的多联机系统故障诊断模型,实时监测系统健康状态,确保系统高效和可靠运行,具有节能和经济价值。而现有多联机故障诊断相关研究较少考虑复合故障,及其不同故障程度对故障诊断结果的影响。本文以海量实验数据与专家解耦知识为基础,以
学位
中医药文化是我国优秀的历史传统文化,是打开中华文化大门的一把钥匙,开展中医药文化进校园可以加强民族自信心和自豪感、提高青少年思想素质,有助于文化传承,推进中医药文化进校园势在必行。此文围绕中医药文化进校园,从必要性、发展现状和对其教育模式的思考及建议3个方面进行分析阐述。
期刊
宽谱中红外激光在光谱测量、光学相干层析成像等诸多领域有广泛的应用前景。飞秒差频产生器(Difference Frequency Generator,DFG)是一种产生宽谱中红外激光的有力工具。本论文针对现有飞秒DFG系统输出带宽有限的问题,重点研究了如何拓展非线性晶体的参量增益带宽,从输入基频光的谱宽和非线性晶体参量增益带宽两个角度出发,力图利用飞秒DFG获得宽谱中红外激光。本论文主要内容如下:(
学位
输流管道在海洋工程、航空航天、核工业等重大工程中均有着广泛的应用,其可能出现的各类振动现象已成为国内外研究者们重点关注的动力学问题。本文围绕悬臂输流管道系统的非线性力学问题开展了一系列研究,旨在揭示非线性静、动力学机理,提出有效的控制策略,挖掘可能的驱动利用价值,为工程中输流管道的结构设计和控制利用提供研究基础。本文主要研究工作如下:(1)通过动力学理论建模与分析,揭示了轴向基础激励作用下悬臂输流
学位
结直肠癌是临床最常见的恶性肿瘤之一,其高致死率和发病率对人类健康造成了极大影响。目前临床上成熟的治疗方法为外科手术和化疗,但结直肠癌的预后仍然不理想,因此需要寻找其他的途径来提高结直肠癌治疗效率。随着纳米技术的不断发展,诊疗一体化的多功能纳米平台越来越多地被开发出来。本文设计了针对结直肠癌的诊疗策略,在CT/荧光成像引导下,实现了结直肠癌多模态联合治疗,主要研究内容如下:(1)合成了一种用于口服给
学位
二氧化钛(Titanium dioxide,Ti O2)被广泛应用于食品、医疗保健、个人护理以及环保等领域。尤其是,作为食品添加剂的Ti O2(其中36%的颗粒小于100 nm)常添加于一些被认为是肥胖和动脉粥样硬化危险因素的高脂食品(如巧克力、油炸食品、膨化食品和奶茶等)中。然而,Ti O2经口摄入是否会影响肥胖和动脉粥样硬化的发生发展一直未被深入探究。多项研究表明,Ti O2经口摄入会引起肠道
学位
随着现代科学和智能制造技术的飞速发展,功能多样化、模块集成化、体积小型化和低功耗成为了功能器件和仪器设备的发展方向。相比于传统的光学器件,微光学器件具有结构紧凑,体积小,可阵列化和集成化等优点,在光学成像,生物医学,信息存储和激光技术等领域有着重要的应用前景。尤其是随着新概念和新技术相结合的微光学器件不断出现,拓展了微光学领域的研究范围,同时也对微纳制造技术提出了更高的要求。目前主流的微纳制造技术
学位
基于离子热电效应的热化学电池能够将近室温热能(<100℃)直接转换为绿色电能,其效率(η)由等效热电势(Se)、电导率(σ)和热导率(κ)共同决定:η∝(Se)2σ/κ。然而,上述三个热电参数本征地强耦合关联,使得η的提升存在巨大挑战。此外,热化学电池要实现集成及应用还存在p型和n型的种类匮乏和适配性差等瓶颈问题。针对上述挑战,本论文从热力学理论出发对Se进行了再推导:Se=(ΔS+ΔC)/nF,
学位