基于视觉认知的无参考图像质量评价

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:yushui223
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为一种比语音和文字更丰富的信息载体,视觉数据是人们获取信息和理解世界的主要方式,拍摄和分享高质量的图像也成为了我们日常生活不可或缺的一部分。高质量的图像是给人以舒适的视觉体验、传递清晰完整信息的基础。然而,由于光照条件的限制、成像系统的缺陷、传输压缩的损失、显示设备的错配,加之拍摄技巧有限和物体的运动等原因,在图像的实际获取、处理、传输和显示等各个环节,都会不可避免的引入失真。如何建立自动准确的无参考图像质量评价方法和模型,对指导成像过程、优化处理算法和提升视觉体验具有重要意义。本文旨在参照人类视觉系统感知和理解视觉信号的相关机制,探索符合人类视觉认知过程的无参考图像质量评价方法。具体而言,本文所提方法与主要贡献如下:第一部分提出了一种基于像素空间相关性的传统无参考图像质量评价方法。该方法引入邻域共生矩阵作为一种新颖的结构描述符,从多通道、多尺度上构建了失真图像的邻域共生矩阵,以突显隐藏在图像像素相对位置中的质量感知信息。同时,为了度量邻域共生矩阵分布的非自然性进而预测图像质量,本章设计了包含分布熵、对比度和同质性的一系列统计特征。最后,通过将邻域共生矩阵的分布特征与经典的自然场景统计特征的相联结,建立从联合特征到图像质量分数的回归映射。大量实验表明,该方法在一些较为复杂的颜色失真和局部失真图像上取得了显著提升。第二部分提出了一种基于自动数据扩增的深度无参考图像质量评价方法。针对主观质量标注图像不足的问题,该方法基于美学构图和视觉注意机制设计了一种自动数据扩增策略。该策略能够对不同尺寸的失真图像自适应的确定裁剪尺寸和裁剪位置,从一张失真图像中得到多个质量一致的图像块作为训练数据。考虑到图像质量主要取决于视觉显著区域,该策略分为两步引导数据扩增过程:1)借鉴美学构图原则自适应确定裁剪尺寸,在能取出大部分视觉主体的同时又留有足够的扩增空间;2)采用视觉显著性检测进行二次筛选,确保来自同一张失真图像的所有图像块都取到了图像的大多数的视觉显著区域,共享相近的图像质量。最终,通过卷积神经网络从自动扩增的图像块中提取多层卷积特征,融合回归得到图像质量分数。实验表明该算法在人工失真和现实失真图像上都取得了杰出表现。第三部分提出了一种基于内在推导机制的深度无参考图像质量评价方法。研究表明人类视觉系统并非本地地处理输入的视觉信号,而是存在一套内在推导机制。该方法试图通过一个恢复重建网络模拟人类视觉系统的内在推导机制,具体而言,是通过对失真图像下采样后超分辨重建,来模拟人类视觉系统根据大脑中的记忆信息对待识别的视觉场景进行推导和恢复的过程。超分辨重建得到的恢复图像和失真图像的差异在一定程度上反映了图像中细节信息和结构信息的完好程度,可以用于预测图像质量。此后,一个孪生网络作为质量评价网络,被用于同时从失真图像和恢复图像中提取质量感知特征,回归预测图像质量分数。实验表明,该方法在多个公开数据集上都取得了杰出表现,进一步提升了无参考图像质量评价的主观一致性。
其他文献
硫系玻璃最早于上世纪五十年代作为透红外传输介质被开发出来,因其具备声子能量低、折射率高,在较宽的红外波段范围内有优异的透过性能,在红外热成像领域受到广泛关注,被认为是前景光明的红外材料。但是目前可供使用的硫系玻璃大多还是二元或三元硫系玻璃,种类偏少,相变温度低,部分性能不稳定,且许多工艺有待改善。本文将以Ge30-xSb10Se60Tex(x=0、3、6、9、12、15、18、21)和Ge20-x
基因的增加和缺失是两种主要的拷贝数变异形式。基因拷贝数在物种进化的过程中频繁的发生变化,基因拷贝数变异引起基因家族大小的变化,而基因家族的变化,可能是物种适应环境的结果,这种结果可能导致该物种在形态、生物学功能上有所变化,通过比较基因组的方法可以帮助我们探讨这样的变化规律以及解释发生这些改变的原因。通过比较基因组学的方法,我们将不同物种的基因组进行比较,识别出有基因拷贝数变异的基因家族,这有助于我
目的:探讨基线血浆低密度脂蛋白胆固醇水平对维持性血液透析(Maintenance Hemodialysis,MHD)患者远期预后的影响。材料和方法:入选2010年1月1日-2016年09月30日于我院肾内科血液透析中心启动并维持血液透析的患者,年龄≥18岁,<90岁,透析时间≥3个月。记录患者年龄、性别、原发病、合并症等一般资料,检测基线血常规、肝功能、肾功能、总胆固醇、甘油三酯、低密度脂蛋
无线链路的带宽是整个无线通信中最为宝贵和稀少的资源,而网络协议报头中含有大量的冗余,因此,在进行无线传输时对网络协议报头进行压缩传输可以大幅节省带宽资源,提高传输效率。鲁棒性的报头压缩(Robust Header Compression,ROHC)算法[1]是目前公认的无线链路上较为理想的报头压缩方案,它采用多种机制在保证压缩效率的基础上尽可能地提高算法的鲁棒性,从而在高误码率、信道衰减比较大、高
为了解决风险度量的不确定性等问题,次线性期望的理论被提出并成为了经典概率理论研究发展的一个新趋势.本论文将经典概率空间中的极限理论推广到了次线性期望空间,建立了次线性期望空间下负相依(ND)随机变量序列加权和的完全收敛性和几乎处处收敛性以及广义负相依(END)随机变量阵列的完全积分收敛性.首先,我们将概率空间中的完全收敛性定理作为理论依据,再结合次线性期望空间下ND随机变量序列的负相依性,以及次线
项目管理,风险管理等概念均起源于美国,并于之后引入国内,经过国内一段时间的发展,逐渐形成一套适应我国国情的项目管理理论体系。这套理论在初期更适用于工程项目的管理,但是随着科技与时代的进步,我国信息化建设工作的深入推广,信息化与工业化融合的需求逐步增强,越来越多的信息化项目需要用到项目管理领域相关知识与能力,不同类别的信息系统的安全稳定运行将直接关系到企业秩序与国计民生。与此同时,在网络科技的发展下
在过去的几十年中,数字图像处理和网络通信的发展引人注目。它们产生的直接影响就是提高了对互联网和无线网络进行实时安全的图像传输的要求。因此,为了应对这一挑战,密码学者们提出了各种各样的图像加密方案。在众多的方案之中,基于混沌的图像加密算法取得了尤为显著的成就。这是因为这类加密算法在安全性、复杂性、速度、计算能力和计算开销等方面都表现出了非常出色的性能。此外,基于混沌的加密技术可以对图像数据进行快速地
工业机器人技术水平是一个国家工业自动化水平的重要标志之一,随着社会生产和科学技术的发展与进步,中国机器人行业正处于井喷时期,中国已经成为全球机器人增长速度最快的工
越南是一个正在发展的国家,由于近年来越南经济的稳步发展,电子商务和网上购物的普及,使得快递行业在越南也到达了其发展的良好时期。目前快递服务供应商在越南可分为三大类:国营快递企业,私营快递企业以及国外引进的快递企业。越南快递服务供应市场除了面临由国外引进的巨头快递企业带来的挑战外,还存在越南国内的各个快递企业之间的剧烈竞争。因此,越南快递企业应该加速地提升自己的竞争能力,这也使得快递企业在其竞争战略
东北红豆杉(Taxus cuspidata)是我国珍稀濒危植物和极小种群保护物种,也是提取抗癌药物紫杉醇的珍贵植物资源,因此东北红豆杉的保护和利用备受关注。目前有关东北红豆杉的研