基于鉴别性先验的视频图像去模糊深度算法研究

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:rayjoyjoyray
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像作为信息接收和传递的重要载体,已渗入到社会生活的各个方面。在成像过程中,由于成像设备自身缺陷或其他外界因素的干扰,则会生成降质图像。其中,因在曝光时间内发生相机抖动或目标运动而导致的图像模糊问题,是图像复原任务中最基本,最重要的问题之一。本文以非均匀模糊视频图像为研究对象,以鉴别性图像先验知识为切入点,在对抗学习的理论框架下深入探讨端到端去模糊深度模型与算法。主要工作如下:首先,基于一个好的盲去模糊先验模型应该更倾向于清晰图像而非模糊图像这一基本思想,本文在探索传统方法中性能突出的鉴别性图像先验的基础上,尝试将鉴别性先验知识以损失函数的形式融入到神经网络框架中,以模型驱动结合数据驱动的方式进一步提升深度模型的性能。具体而言,分别尝试了基于梯度的鉴别性先验(DGP)损失函数和基于互反双通道能量(OCE)的鉴别性先验损失函数。在不改变深度去模糊模型Deblur GAN的网络架构前提下,通过实验证明了本文提出的互反双通道能量损失函数可以有效增强网络的去模糊能力。其次,鉴于Deblur GAN生成器的模型缺陷会限制整个模型的表达能力,本文从两个角度出发设计了更高效、鲁棒的去模糊模型—Deblur GAN+。一方面,设计了一种简单、稳定、鲁棒的特征提取网络—自编码器,并在其中引入了诸如跳跃连接、密集连接等关键要素,以此替代Deblur GAN中的原始生成器。另一方面,为进一步提升模型的去模糊性能,模型还结合了本文提出的基于互反双通道能量的鉴别性损失函数。在大规模动态场景模糊数据集和真实模糊场景上都验证了Deblur GAN+相较于Deblur GAN的优越性。最后,本文对基于深度学习的盲去模糊方法进行了批判性反思,主要从数据集和模型两个方面展开。一方面,数据集作为结果评价的重要指标,本文对经典数据集构建过程的合理性进行了反思。另一方面,评估新近代表性深度去模糊模型的实用性和鲁棒性。用于测试的数据集涵盖了真实动态模糊场景,合成以及真实静态模糊图像,全面评测深度去模糊方法在不同模糊类型场景下的去模糊性能。结果表明,尽管模糊数据集的合成手段日益完善,但还不能完全取代真实模糊图像;而深度去模糊模型在静态模糊场景上的表现距离传统方法还有一定差距。
其他文献
目的探讨医学生进行被动性社交网站使用时所产生的妒忌和抑郁的消极情绪反应,引入上行比较这一概念作为解释医学生所使用社交网站时出现的心理反应机制。方法将被试选定为山
随着互联网的迅速发展,网络中的信息量变得十分庞大,用户难以在网络中寻找自己感兴趣的信息。推荐系统能够发现用户兴趣偏好并预测用户行为进而推荐给用户有可能感兴趣的信息或者商品,极大地解决了信息过载的问题。其中,协同过滤算法因具备简单、高效以及可解释强的特点,在推荐系统领域得到了广泛的应用。但是传统的协同过滤算法常常忽视了用户之间的影响模式以及用户自身历史行为,限制了推荐系统的性能。本文针对这些问题提出
高介电常数的复合材料在微电子工业中有着重要的应用,特别是在嵌入式电容器领域,聚合物基复合材料具有柔韧性好、加工方便、重量轻、成本低等优点,能够满足微电子微型化的要
随着经济一体化、金融全球化的深入发展,金融业的竞争日益加剧,各大金融机构都在谋求安身立足且长足发展的道路。客户资源对于银行而言是最核心的资源,对银行的正常运营有着
本文指出大多数的超表面是通过相位梯度法或其改进的方法构建的,而这些方法通常提供非常复杂的结构单元。根据单向完美吸收体与透射型超表面两者在上表面都无反射这一相似点,
最近,郜-景-夏-张[13]定义了量子N-toroidal代数的一般结构,它们是经典量子toroidal代数的一种自然推广,就像2-toroidal李代数和N-toroidal李代数之间的关系.基于这个工作,本
随着网络空间的兴起和发展,越来越多的研究者参与网络空间研究,国外的学术界对网络空间的探索研究相当全面且深入。虽然我国网络发展起步晚,但国内研究尤其是近几年对网络空间治理的研究也有相当的学术价值。2020年年初,武汉出现了新冠肺炎疫情,进而封城,进入了紧急状态。这场疫情让网络几乎成了我们社交的全部,也让网络空间治理上升到前所未有的高度,网络舆情、网络谣言、网络暴力等问题的凸显,让我们必须重新审视加强
为进一步满足因经济快速发展、产业不断优化升级后社会对复合型、应用型、创新型的高层次专业技术人才的广泛需求,2009年我国开始设立全日制硕士专业学位,进一步开展专业技术人才的培养。11年来,虽然我国在全日制工程硕士研究生方面的培养已初见成效,然而就目前情况而言,我国全日制工程硕士人才培养质量与世界一流水平仍有不小差距,因而如何提升人才培养质量日渐成为业界广泛关注的核心话题,已有研究虽对培养环节中存在
学位
光催化分解水技术能够制备清洁、环保及高能量密度的氢燃料,为解决日益严重的能源危机和环境问题提供了一种有效的途径。有机共轭聚合物材料由于易于制备、结构明确、光电性
镁合金作为最轻的结构金属材料之一,具有良好的加工优势、资源优势和性能优势,但因其性质活泼耐蚀性差而严重制约其在工业领域的应用。镁合金的超疏水表面具备众多特殊功能的