结合传统先验与深度神经网络的图像复原方法研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:forgetyouba
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像复原是数字图像处理与计算机视觉领域中一个典型的病态问题。数字图像拍摄过程中存在诸多不可抗因素,如:相机抖动、物体运动、景深变化、大雾天气等,使得图像成像质量差,影响视觉感官以及后续的计算机视觉任务的精度。因此,采用图像复原算法从退化图像中复原出清晰、高质量的图像具有重要的研究意义。近年来,图像复原的成功主要归因于传统图像先验和深度神经网络两大类方法:传统图像先验从统计、原理层面挖掘退化图像与清晰图像的内在差异,设计一个能够区分两者的响应函数作为先验约束,使优化过程中求解出的图像符合清晰图像的特质;深度神经网构建一个从退化图像到清晰图像的映射函数,通过大量数据的训练,使得网络模型具有复原出清晰图像的能力。本文结合传统图像先验与深度神经网络,研究图像复原方法,主要解决图像复原中的图像去模糊与图像去雾问题,其主要贡献如下:首先,提出了一种基于深度回归网络的模糊核尺寸估计方法。对于一张输入的模糊图像,网络能够分别估计出模糊核的宽度与高度。针对网络中存在全连接层导致其需要输入的图像尺寸固定,难以满足估计任意模糊核尺寸的难点,提出在训练过程中采用相对尺寸标记的方法,估计模糊核尺寸与图像尺寸之比,增加网络能够估计出的尺寸范围。提出的模糊核尺寸估计网络能够给予现有的盲反卷积算法可靠且准确的模糊核尺寸输入,优化现有算法的复原效果,提高算法的效率。其次,提出了一个数据驱动的判别式图像先验,用于解决传统先验普适性、鲁棒性差的问题。通过学习一个深度神经网络,将图像先验建模为一个二分类器。所学习的图像先验能够区分模糊与清晰图像,将其嵌入至最大化后验概率优化框架中,有助于在各种场景中进行图像去模糊,其中包括自然、人脸、文本和低光照图像,以及空间非均匀模糊图像。然而,一个非线性的神经网络融入至MAP优化框架中,大大地增加了模型优化的难度。对于此,提出了一种基于半二次分裂方法和梯度下降算法的有效数值方法来优化所提出的模型。除此之外,提出的模型能够扩展到图像去雾问题上。再次,提出了一个基于景深先验引导的动态模糊图像复原网络。给定一张模糊图像,首先提取图像中的景深信息,再以一个景深精调网络恢复出景深图中的边界与结构。为了有效地利用景深先验,采用空间特征变化层提取景深特征,并通过缩放和平移与图像特征融合。因此,提出的去模糊网络能够在景深先验的引导下复原动态场景模糊图像。大量实验和分析表明,景深信息对于所提出的去模糊网络的性能至关重要,提出的网络具有先进的复原效果。最后,提出了一个基于半监督学习的单帧图像去雾网络,其包含了一个全监督分支和无监督分支。在全监督分支中,深度神经网络由全监督损失函数(即带标签的损失函数)约束,其分别为均方误差损失、感知损失,以及对抗损失;在无监督分支中,利用干净图像的内在属性,将图像梯度以及暗通道稀疏先验转化为非监督的损失函数,用于训练提出的神经网络。该网络同时采用了仿真生成的带雾图像数据以及真实拍摄的带雾图像数据,以“端到端”的方式进行训练。经过系统的分析,本方法训练的神经网络模型不会受限于仅在仿真数据上有效,且能够很好地处理真实拍摄的带雾图像,复原出干净图像。
其他文献
海洋牧场生态健康评价是海洋牧场生态保护的基础。本文采用层次分析法(AHP),以水质环境、生物资源和外来压力为准则层,以11个因子为指标层,建立了海州湾海洋牧场生态健康评价体系
提高网络设备和服务管理的智能性和可操作性,对网络中的设备拓扑连接自动准确的发现以及发现结果的可视化具有重大意义.文章介绍了采用SNMP协议对网络中设备拓扑结构进行深度
<正>第三十四回信息整理比武大会上回说到诸葛亮为大家介绍了扇形统计图的特点:1.(1)第一年到第三年,张飞队伍参加蜀军业余活动的人数比关羽队伍增长得快.(2)关羽队伍参加下
论述了温挤压成形时存在模具磨损与挤出齿轮件头部凸的问题,分析了其产生的原因与造成的后果。为了节约成本与生产顺利进行,采用冷挤压工艺方案进行工艺实验。实验研究了齿轮
近年来,我国肢体残疾人数量增长迅速,而市场上的传统假肢由于成本高、体积大、感官性差等原因不便于在实际生活中使用。随着医学技术和现代工程技术的不断改进创新,假肢的研究越来越受到重视,在现代运动康复医学中占有重要地位。假肢的仿生控制,尤其是如何利用使用者自身的信号,即表面肌电信号(surface Electromyo Graphy,sEMG),灵活有效地控制假肢,一直是假肢技术研究的热点问题之一。虽然
目的:应用光相干断层扫描血管成像技术(Optical Coherence Tomography Angiography,OCTA)观察孔源性视网膜脱离巩膜外加压术后长期视网膜下液残留患者黄斑区微结构改变,并分析其对视功能的影响。方法:纳入2017-09-01至2018-10-31期间于保定市第一中心医院行巩膜外加压术的孔源性视网膜脱离患者,术后眼底镜下观察视网膜成功复位,但行光相干断层扫描检查(O
多介质流动的数值模拟对理论研究和工程实际都有非常重要的意义。然而复杂多介质流动的数值仿真一直是计算流体力学中的难点问题之一,其中涉及物质界面重建、多介质输运等问
<正> 麦胚油(Wheat germ oil)来源于麦胚芽,是含多不饱和化合物和维生素E最丰富的天然资源。它是一种安全的天然物,已作为公认的天然食品添加剂及个人卫生用品添加剂。已投入
材料表面特性是影响材料~细胞/组织相互作用的关键因素,其影响细胞/组织相互作用的重要途径之一是调节表面吸附蛋白状态及行为。因此,材料~细胞/组织界面的蛋白行为的调控对于
间歇生产过程是现代工业生产中一种重要的生产方式,其产品与人们的生活息息相关。为了能够及时处理异常工况、保证间歇过程安全稳定运行,有必要对间歇过程进行监测。在诸如催