图像质量评价与提升算法及应用研究

来源 :北京科技大学 | 被引量 : 0次 | 上传用户:q2101369
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像是人类获取信息的重要来源,是人们分享生活、表达情感的方式之一,同时也是计算机视觉任务的重要数据类型。但是由于拍摄设备、图像传输等问题,图像质量参差不齐,低质量的图像严重影响人们的视觉需求和后续高级视觉任务的准确性。客观准确的图像质量评价方法可以为图像质量提升算法挑选低质量的图像,也可以提供反馈和优化。但是,目前图像质量评价仍然存在数据量少、参考图像难以获得等问题,图像超分、图像去噪作为非单一解的图像质量提升任务仍然存在较大提升空间。因此本文围绕图像质量评价和图像质量提升在算法与应用两个层面展开了深入研究。在算法层面,主要针对图像质量评价,图像质量提升中的图像超分、图像去噪问题的难点展开研究;在应用层面,将图像质量评价应用在相机镜头局部解析力失效检测中,将图像去噪算法应用于水面反光图像去噪点,最后围绕图像美学质量提升提出了自然散景效果渲染的方法。本文的研究内容和主要贡献如下:(1)在图像质量评价研究中,针对参考图像难以获得和图像数据量少的问题,本文提出了一个基于生物视觉启发的图像质量评价模型,具有图像输入多尺度、网络结构多尺度、输出特征多尺度且完全不需要参考图像的特点。受生物视觉启发,设计了模拟人眼视神经对不同距离图像的多尺度轮廓响应模块,使模型更加关注图像边缘轮廓清晰度而非图像色彩特征;受视网膜神经节细胞感受野机制启发,构造了中心注意周边抑制模块,同时结合亮度信息,对图像不同区域的图像块采用不同的质量权重。模型采用两阶段方法解决了数据量少的问题,并对模型添加分类任务分支后,成功的应用在了图像失真类型分类及质量评价的多任务研究中。(2)针对大倍率的图像超分问题,提出了基于图像局部特征关联的图像超分模型。目前的许多超分模型大多应用在4倍以下的图像超分中,为了应对大倍率图像超分的问题,引入局部特征关联模块为不同区域的图像块建立关联度,使特征相近的图像块在进行超分时可以互相借鉴;通过预训练的跳跃连接式生成网络生成高倍图像,然后通过多分辨率逐级提升模块,让不同分辨率的图像进行融合,充分融合不同分辨率图像的特征,进一步优化高倍分辨率图像的纹理、轮廓、颜色等特征细节。(3)针对真实噪声-干净图像对获取困难的问题,提出了基于噪声空间特征表征的图像去噪模型。当前有监督的深度学习去噪模型,大多采用人工添加高斯噪声的方式来获取噪声图像进行模型的训练,由于人工合成的噪声与真实噪声的分布差异,导致模型在真实噪声图像的处理上表现不佳。针对上述问题,本文借鉴自监督对比学习的方法,通过“图像平移”和“噪声自相似搜索”两种正样本生成的方式,在没有噪声标签的情况下学习噪声特征。同时本文将去噪模型应用在游泳馆危险行为检测的任务中,成功的解决了水面图像反光噪点影响后续检测误检的问题,充分说明了图像去噪等图像质量提升任务作为后续视觉任务预处理功能的重要性。(4)针对相机镜头解析力检测对检测位置的局限性,借鉴图像质量评价的思路提出了相机镜头局部解析力失效检测的方法。目前大多数相机镜头生产厂家采用的镜头解析力检测方法,仅仅对左上、左下、右上、右下及中间区域进行检测。为了能够对镜头的任意位置进行解析力失效检测,本文根据图像质量检测的原理,通过拍摄的图像间接反映镜头解析力,并提出了基于亮度和梯度的计算方法作为衡量镜头解析力的指标。通过相关性对比实验和可视化分析,说明了提出方法的可行性,为相机镜头局部解析力检测提供了一种新的思路。(5)为了进一步提高图像的美学质量,根据自然散景效果的特点,提出基于深度估计的可选焦平面的重对焦图像生成方法。通过深度估计模块获得图像中物体深度信息;通过背景分区模块选择不同的焦平面,获得不同的模糊半径,使散景渲染效果更多样,且不会过度分割物体;通过调整渲染参数,改变渲染程度。可视化结果表明,该方法满足“焦平面的物体清晰,焦外物体模糊且距离焦平面越远物体越模糊”的散景效果特点。本文针对图像质量评价和提升算法的部分难点展开研究,并将图像质量评价和提升算法应用在了相机镜头解析力检测、图像预处理、图像美学提升领域,充分说明了本文研究的意义及重要性。
其他文献
<正>提起褐藻,大家一般会立刻想到海带(Saccharina japonica)、裙带菜(Undaria pinnitifida)和羊栖菜(Sargassum fusiforme)等可以食用的藻类。海边出生的我,小时候经常在海边捡到褐藻,但总是纳闷为什么这些植物不是绿色而是黄褐色?现在作为中国科学院大学老师的我,每年都要给学生们讲解:在光合作用中,色素是捕捉光线的“天线”,褐藻除了含有绿色的叶绿素
期刊
<正>随着信息技术的不断发展,万物互联的物联网技术被广泛提及,通过将各种智能软件与硬件设施相结合让人们动一动手指或者动一动嘴唇就可以控制各种设备,这一特点也使物联网技术被广泛应用于智能家居中来提升居住者的舒适感与生活品质。本文通过介绍物联网技术与智能家居的产生及发展过程,探讨了现阶段物联网技术在智能家居中的具体应用,最后对物联网技术在智能家居中应用的缺点及未来发展趋势进行了探讨。以期为我国物联网技
期刊
<正>许多年前的学生时代,在台湾成功大学,时常囊中羞涩,因此对饮食衣着奉行极简,平常三餐,能在学校食堂解决的,就很少溜到外面去品尝美食解馋。有时听同学谈起,某某餐厅某某食物风味极佳,不去吃就太可惜了,总会点头应说好啊好啊,结果只是空应。清贫常常扼杀了人们对味道的无限想象力,减少了人们对食物好不好吃的辨别,同时也影响了人们行动范围的远近。可是在当时而言,一碗三四十元新台币的虱目鱼羹,还是吃得起的。
期刊
<正>殷行社区卫生服务中心位于上海市东北角,主要承担殷行和新江湾城2个街道22万余居民的"预防、保健、医疗、康复、健康教育、计划生育技术指导"六位一体的服务功能。中心建筑面积5 200 m~2,在岗职工总数244人,其中卫生技术人员216人,其中正高职称1人,副高职称10人。中心下设社区卫生服务站12个,核定床位50张。中心十分注重提升社区教学基地的内涵建设,近5年来发表论文59篇,其中核心期刊论
期刊
数字经济的发展与信息技术的变革加快了数字农业的发展,数字农业是我国从农业大国走向农业强国的必由之路。论文以我国长江经济带数字农业为研究对象,首先从数字农业的基础能力与设施维度、人才与技术维度、信息化基础维度、绿色生产维度构建数字农业发展指标评价体系,然后运用熵值法评估长江经济带11个省(市)数字农业发展水平。结果表明,长江经济带数字农业发展水平存在显著地区差异,近五年发展水平由高到低依次为中游、下
<正>特殊儿童的学前教育具有十分重要的价值,是一个早发现、早干预、早康复的过程,能让特殊儿童许多问题在学前阶段早解决,从而为特殊儿童的终身发展奠定基础。在学前教育阶段开展融合教育具有很多的优势,没有小学和初中的学业压力,幼儿之间是纯真的玩伴关系,幼儿身上出现的一些问题也都处于早期阶段,为矫正与康复提供了良好的基础。本文以一个特殊幼儿的教育为例,展现了一个特殊幼儿融合教育历程,
期刊
含铝食品添加剂作为居民常用膨松剂及稳定剂,具有广泛的受众,但滥用含铝食品添加剂的行为可能导致潜在的公共健康风险。本文以含铝食品添加剂为研究对象,从含铝食品添加剂的基本特性、含铝食品添加剂的检测技术、食品铝含量监测三个方面展开论述,并对各部分存在的问题进行归纳总结。
图像超分辨率算法能够在成像设备性能受限的情况下,提高图像分辨率,恢复图像高频细节,提升视觉感官效果,是计算机视觉领域的一个重要分支。目前基于深度学习的图像超分辨率算法研究趋向于通过加深和加宽网络来提升性能,但这样做也可能带来梯度弥散和特征冗余等问题,从而引起网络退化,并且大多数研究忽略了不同尺度特征的充分利用,进而影响了网络重建效果。此外,目前研究主要使用理想降质模型(例如双三次插值降采样)获取低
近年来,太赫兹(Terahertz,THz)波因其独特优势备受关注,以太赫兹时域光谱(Terahertz time-domain spectroscopy,THz-TDS)及其成像技术为代表的太赫兹无损检测技术有望发展成为一种新型的无损检测补充手段。本文将太赫兹无损检测方法与国内检测复合材料使用的标准方法(X射线工业计算机层析成像和超声C扫描成像)进行对比,发现太赫兹无损检测技术对缺陷成像拥有更高
原油是现代生活、生产活动重要的能源和原材料之一,其价格的波动与宏观经济的平稳运行、资本市场的健康发展、个人投资者的选择息息相关。自上世纪80年代以来,原油逐步金融化,原油期货市场的有效运行更是对政府部门、投资者和相关企业生产活动产生深远的影响。当今世界,各国经济联系愈加紧密、网络技术不断进步,投资的国际化、便利化程度进一步提高,使得国际原油期货价格的任何异动都会产生牵一发而动全身的影响,宏观管理者