任务驱动的深度学习图像增强研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:fostervfr
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着数字图像应用的不断普及,图像增强技术的重要性也愈发凸显。进几年来,深度学习技术的不断进步带动了图像增强算法性能的提升,但目前提高深度网络的学习效率,提升算法在实际场景中的性能以及根据任务导向优化算法等方面仍面临着一些挑战。本文基于实际的增强任务,对其中的一些挑战进行了研究和讨论。首先,图像颜色的好坏是影响观看体验的重要因素之一。我们根据颜色增强需要兼顾整体风格和局部调整的特性,提出了一个通道级全局线性增强和像素级局部非线性增强相结合的多层级增强算法,该算法通过两个级联的卷积神经网络实现。其中,通道级全局增强是基于输入图像红绿蓝三通道的线性映射,映射系数由一个卷积神经网络预测。像素级局部增强则通过另一个卷积神经网络实现像素到像素的局部微调,并且在网络中引入了非局部模块加强局部的关联。全局增强能够保留较好的整体颜色一致性,局部增强则能抑制局部的颜色失真。实验结果表明所提出的方法中各个模块都能在一定程度上提升整体性能,并且完整算法的性能在量化指标和主观质量上都超过了一些目前最先进的算法。其次,实际场景中的图像失真比较复杂,容易出现多种不同类型的失真叠加的情况。我们受到深度图像先验的启发,提出了一个基于双重先验学习的混合多失真增强算法,算法框架由图像先验网络和失真先验网络构成。其中图像先验网络利用图像内在先验从随机噪声生成清晰图像,失真先验网络则根据输入图像预测包含的失真类型和失真等级,再通过失真模型将清晰图像转换成失真图像以此反向约束生成的清晰图像。对抗学习的采用使得图像先验网络增强结果的分布与真实清晰图像的分布相近以进一步加强主观质量。我们对所提出算法进行了详细的实验验证,实验结果表明所提出的算法相比于原始的深度图像先验能更有效地处理未知失真类型和等级的混合多失真图像。此外,目前的增强算法普遍存在一些维度的质量不可兼得的问题。基于此现象,我们进一步讨论了基于深度网络的颜色增强模型和混合多失真增强模型在任务导向下的优化。其中,针对颜色增强模型,本文讨论了常见的感知损失函数和对抗训练的影响。针对混合多失真增强模型,则讨论了引入同样由深度网络构成的识别模型计算识别损失函数并反向优化增强模型的影响。
其他文献
世界阅读日每年只有一天,阅读月每年只有一个月,但我们的阅读行为不能停止,阅读重在日久天长。读书宣传的声音高涨,阅读的理念越来越深入人心,几乎人人都在阅读。然而阅读的
飞机尾迹可引起全球变化、显示飞机飞行轨迹,是研究全球变化和军事气象航空气象保障的重要内容。本文利用北京站1951年-2002年的观测资料,首先对资料均一性进行了检查;实现了
目前我国已发现大量中新生代陆相盆地含有石油与天然气,前人已经做了大量研究和生产实践工作。而分布于下扬子板块内部的宣—广盆地在油气方面尚无突破,相对研究程度较低。本文在对前人研究资料的分析和整理的基础上,以构造地质研究为主线,通过大量的野外地质调查和室内分析,结合区域动力学背景,对宣广盆地的结构、构造特征及其演化、盆地形成的动力学机制等问题进行了研究。认为盆地基底由震旦纪至中三叠世海相沉积组成,其基
费孝通先生提出"中华民族多元一体格局"是基于长期学术研究积累,他早年写下的《分析中华民族人种成份的方法和尝试》(载《费孝通全集》第一卷,内蒙古人民出版社2009年版)是其
佛教和合思想通过哲学解析与历史开展得以充分表达。在哲学解析上,通过心性识境之界定,以分别说论述:识境和合,心性和合,心识和合,性境和合;以合一说论述心性识境圆融一体。
在中职语文教材中,有许多语言优美、意蕴丰厚的古诗。这些古诗包括《诗经》、楚辞(屈原的诗)、汉乐府、唐至清的诗、宋词、元代散曲与小令、现当代人写的古典诗词。古诗教学是中职语文教学中的重要组成部分,也是我们教学中的一个重难点。在古诗教学中,教师要注意教学方法,讲究教学策略。然而中职语文古诗教学现状不容乐观,学生学习古诗的积极性并不高,教师也主要采用的是传统的讲授法教学。因此,探索一种合适的中职语文古诗
作为基础科学教育的重要学科,初中物理课程不仅要关注物理知识与技能的双基能力,也要关注学生的学习兴趣、学科技能和科学素养的培养。学生实验是学习物理的重要组成部分和培养物理学科能力的途径,同时是决定学生物理实验掌握效果的影响因素之一。因此,构建高效的实验教学课堂具有重要意义。初中生的生理和心理都处于快速发展阶段,是提高学生内驱力、培养学习志趣和素养能力的关键时期。但又因为面临升学压力,教师在平时的实验
气象辅助导航系统中的飞行轨迹优化要求满足航空危险天气的回避,飞行轨迹优化算法是气象辅助导航系统的核心技术之一。本文通过对气象辅助导航系统中涉及到的实际规划问题的
随着我国汽车普及率的不断提高,如何在复杂的交通环境中,提高乘坐安全性与缓解交通拥堵已经成为驾驶辅助系统重要的发展方向。自适应巡航控制技术通过对纵向车距的控制,在保
各地级以上市教育局,省属中职学校,华南师范大学附属中学、广东实验中学、华南师范大学附属小学:为深入学习贯彻习近平总书记在党史学习教育动员大会上的重要讲话精神,按照教