基于视觉感知表征特性的无参考图像质量评价方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:mnbvc1c2c3
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多媒体数据是大数据时代最主要的信息载体,而图像则是多媒体数据最常见的表现方式。传统的图像处理系统,往往注重图像传输的速率、方式,而忽略了图像在采集、传输以及处理过程中因噪声而引起的图像视觉内容失真。然而,视觉内容失真将直接造成所获图像无法满足接收端的基本应用要求。因此,亟需对获取的图像进行质量评价。众所周知,作为图像最终接收端的人类视觉系统是一个复杂、高效的信息处理系统,其能够有效感知图像中的视觉内容,并快速判断获取信息的质量。所以,为了能够准确进行图像质量评价,需要以人眼视觉感知特性作为基本准则,探究如何准确有效地从图像中提取视觉内容表征并预测图像质量,从而为后续的视觉信息采集、压缩、重构等一系列操作提供指导。本文从人类视觉系统的感知特性出发,探究图像视觉内容的描述与表征,建立基于感知特性的图像质量评价模型。在人类视觉系统中,初级视皮层局部感受野的简单细胞高度自适应提取具有方位选择性的信息。进一步的,视觉系统的初级视皮层以及纹外皮层通过自下而上的处理机制对图像进行各异化的描述和表征,从而完成对外部输入视觉信号的识别和理解。最后,经过人脑的下颞叶皮层感知,完成对图像的语义理解。基于上述视觉感知过程,本文对不同阶段的感知特性进行深入研究,实现对图像视觉内容的初级、中级以及语义表征,并在此基础上完成以下三个主要工作,其具体研究内容和创新点如下所示:1.针对由于失真多样性造成图像质量难以分析的问题,面向初级视皮层的感知特性,研究图像的初级视觉感知表征特性,提出一种基于图像视觉表征联合信息熵的无参考图像质量评价方法。该方法探究了视觉系统中初级视皮层局部感受野对视觉信号的信息处理机制,并在此基础上提出了一系列描述子来表征图像中的视觉内容。另外,本研究引入信息量的概念,以图像质量衰减的本质是视觉内容信息量的减少为出发点,利用图像描述子的信息量来衡量图像质量。相较于之前的工作,本研究有两个方面的创新点:首先,从人类视觉系统感知特性出发,提取一系列能表征图像视觉内容的描述子;其次,将对图像质量评价转换成对视觉描述子中信息量的衡量。在此基础上,实现了基于图像初级表征的图像质量评价方法。2.针对现有模型对图像进行单一视觉表征的问题,面向纹外视皮层的层级感知特性,研究图像的中级视觉感知表征特性,提出一种基于视觉内容感知表征的无参考图像质量评价方法。该方法以人类视觉感知中识别、理解过程对外部输入信号的信息处理机制为出发点,探究不同感知过程对信号的不同映射。该机制指出在视觉感知的不同过程中,往往对视觉信号进行了不同的映射,前者往往提取了图像中的视觉信息,即视觉表征;后者则表现出对视觉内容的理解,其常常以语言的形式进行交流,即语言表征。然而,现有模型往往只考虑图像的视觉表征,忽略了理解过程中的语言表征。因此,为了更加贴近人类主观感知过程,利用图像的视觉表征和语言表征来预测图像质量。首先,探究图像的不同表征对图像质量的敏感性,然后根据敏感性利用上述不同表征对图像质量进行联合预测,进而实现基于图像中级表征的图像质量评价方法。3.针对现有模型不能满足不同视觉场景对图像质量要求的问题,面向下颞叶皮层感知特性,研究对图像质量的语义评价,提出了一种基于图像层级表征的语义图像质量评价方法。该方法以不同的视觉场景往往对图像质量有不同的要求为出发点,着重探究了人类视觉感知系统中对视觉信号自下而上的信息处理特性,实现能够满足视觉场景应用的图像层级表征。从视觉场景应用来看,其往往是对图像中的细节、区域以及全局信息的进一步调制,而视觉系统的自下而上机制则实现了对图像的层级表征。因此,为了满足不同场景下的质量要求,以视觉系统信息层级处理特性为出发点,实现对图像视觉内容的层级表征,并对上述层级表征进行质量评价。另外,大量研究表明,人类视觉感知系统对图像中包含的失真往往具有一定的容忍性,特别是下颞叶皮层对视觉信号的语义理解往往呈现出离散化的特性,因此,采用离散化的形式来对上述层级表征进行质量评价。在此基础上,实现了对图像的语义质量评价方法。
其他文献
逆合成孔径雷达(Inverse Synthetic Aperture Radar,ISAR)作为一种能对各类运动目标进行全天时、全天候成像的信息感知装备,在众多领域具有重要的应用价值。经过半个世纪的发展,ISAR成像基础理论已经比较成熟。然而,近年来随着观测目标和电磁环境日益复杂,各类目标探测任务对ISAR成像分辨率的要求越来越高。在ISAR高分辨成像领域尚有很多问题亟需解决。首先,尽管基于稀疏贝
学位
微动的基本概念是指除目标主体运动以外的微部件的运动,是一种广泛存在于现实生活中的运动形式。雷达目标微动产生的微多普勒特征能够反映目标的电磁散射性质、物理结构和运动特性,可以视为目标的独特特征,在目标探测、成像、分类与识别领域的应用已经受到了国内外学术界的广泛关注。同时在现阶段,我国现役的雷达主要为窄带雷达,且窄带雷达具有探测距离远,成本低廉等优点,研究基于窄带雷达的目标微多普勒特征提取技术,发挥窄
学位
氧化镓(β-Ga2O3)由于具有宽禁带宽度、高击穿电场、高饱和漂移速度等优点,成为适于功率器件的宽带隙半导体。MOSFET器件由于高功率密度、高转换效率及栅驱动简单等优点,广泛应用于电力电子系统。近年来,β-Ga2O3 MISFET国内外研究取得良好的阶段性成果,但在器件制备关键技术如高K介质/β-Ga2O3界面质量、N型欧姆接触及增强型器件设计等方面存在诸多问题,制约器件性能进一步提升。本文针对
学位
未来无线通信系统面临高度集成化与智能化的发展趋势,对射频/微波器件及天线的性能要求也愈发严苛。具有智能调控、功能集成、性能多样的微波器件及天线有望成为未来无线通信系统的核心部件,在军事和民用通信领域发挥重要的应用价值。传统电磁材料及结构的潜力已经被充分挖掘,但仍旧无法满足越来越多智能射频终端的需求,亟需研究新型电磁材料和功能器件的理论体系和设计方法,为未来射频系统发展带来了新的机遇。石墨烯作为二维
学位
近年来,物联网、云计算、移动互联网等技术的兴起促进了大数据产业的蓬勃发展,大数据已深入到医疗、教育、交通等各个传统行业,成为当今社会发展的重要资源与工具。然而,大数据处理会为数据所有者带来巨大的存储及计算开销,难以向用户提供实时有效的服务,故而将数据外包给云服务器成为大数据处理的主流方式。但是,云服务器的引入使得数据所有者与使用者相分离,如何在云服务模式下保障数据安全仍是一个严峻的挑战。为了保障外
学位
无人机(Unmanned Aerial Vehicle,UAV)具有体积小、低伤亡、效费比高、部署便捷等优点,作为实现无人化、网络化、信息化、智能化的有效手段受到越来越多国家的青睐。集群无人机系统是指融合智慧感知、自主决策和协同控制于一体的若干架无人机构成的系统。多个任务执行单元通过分工协作,集群无人机可以迅速准确地执行路径规划、协同侦察、协同感知和中继网络服务等复杂任务,从而提升系统性能。以集群
学位
随着万物互联,人工智能的发展,深度学习技术逐渐渗透到生活中的很多方面如自动驾驶,人脸识别等。然而目前大多数深度学习网络都是基于数据驱动的,无法学习到人类的经验和知识。如在对抗样本识别中,人们依据经验知识很容易完成识别,而深度学习网络通常受到攻击。人类经验知识具有样本少、推理能力强的特点,因此如何将经验知识与深度学习融合是一个重要研究方向。然而,经验知识和深度学习网络在两个方面有较大差异性给有效融合
学位
为应对气候变化挑战、实现碳中和战略目标,发展可再生能源势在必行。针对太阳能光谱分布范围宽的特点,将不适合光伏发电的频率波段的太阳能合理利用使其转化为相应的热能、化学能和生物能等,可以大大提升太阳能利用效率。为实现太阳能分频合理利用,首先要设计并制备基于多层光学干涉原理的选择性滤光膜。传统的多层干涉滤光膜通常是利用真空镀膜来制备,其工艺缺陷是镀膜效率低且不能大面积生产,所以导致制备成本太高,无法大面
学位
Semicrystalline polymers finding wide applications in packaging,energy storage devices,etc.are mostly processed through stretching under various fields that modify their structures and final propertie
学位
粒子加速器储存环中粒子束与真空室内壁和残余气体相互作用产生二次电子,这些电子在储存环真空室内聚集形成电子云,严重影响储存束流的流强、能量、发射度、稳定性和寿命等。电子云是新一代加速器面临的最为关键的问题。缓解电子云最有效的办法是降低加速器真空室材料内表面二次电子产额。开展材料表面二次电子抑制方法的研究已经成为各大实验室的研究重点。国际上通常采用真空室外围缠绕线圈以及真空室内表面镀制低二次电子产额薄
学位