基于时空特征融合的视频质量评估算法研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:tongxu1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着多媒体和网络传输技术的不断发展,人们对短视频和视频直播的质量要求日益增高。视频在拍摄、存储、编码、传输、播放等各个环节均可能引起空间失真和时序失真,导致视频的主观视觉质量降低,影响用户的观看体验。对视频质量进行合理有效的评价已变得越来越重要,视频质量评估领域的研究也受到越来越多的关注。常见的图像质量评估方法常用于衡量视频的空间失真,缺少衡量失真在时序上对视频质量造成的影响,因此与人眼主观感受的一致性较差。此外,编码码流视频中的帧内、帧间编码信息能够在一定程度上反映视频内容的时序和空间质量,但目前视频质量评估方法通常在解码视频上完成,没有利用视频码流中的编码信息对视频质量进行评估。本文针对失真前后视频的时空特征变化及视频编码信息与失真的关联性展开研究,提出了时空特征融合的视频质量评估方法,具体研究内容如下:(1)本文在空间上计算失真前后视频梯度幅值的差异研究视频的空间失真,同时考虑到人眼对视频质量上升和视频质量下降的感受不同,计算视频空间失真的梯度,进一步通过百分比池化后得到衡量视频质量波动的空间质量特征。在时序上利用块运动估计方法,计算视频前后帧的块运动矢量作为视频的时序信息。通过比较失真对视频运动矢量的局部均值和标准差造成的影响,衡量视频的时序失真。最后融合视频在空间和时序上的失真,构建基于运动估计的全参考视频质量评估模型。在公开数据集上的实验结果表明,本文所提模型在降低获取视频运动信息时间复杂度的同时,获得了与人眼主观感受一致性更好的预测结果。(2)视频码流中存在与视频质量相关的帧内、帧间编码信息,例如代表视频内容纹理丰富程度的编码树划分深度、代表压缩程度的量化参数值以及代表视频内容运动情况的编码运动矢量等特征。为了便于研究视频编码信息与主观质量的相关性,本文首先构建了基于视频编码信息的码流视频质量评估数据集,之后将码流视频在解码端得到的编码信息作为视频时空特征,采用梯度提升回归树的方式进行特征融合,得到无参考视频质量评估模型。最后在所构建的数据集上对所提出方法进行了有效性的实验验证。实验结果表明,该模型能够在不利用解码视频的情况下,利用视频码流中的编码信息完成视频质量评估过程,且评估结果与人眼主观感受一致性较好。
其他文献
作为近年来计算机视觉领域关注较多、创新较频繁的一个研究方向,二维多人人体姿态估计的主要目的是检测人体目标的关节点信息并进行标注。本文以二维多人人体姿态估计任务中网络轻量化算法作为本文的研究重点,重点研究了基于自上而下算法和自下而上算法两种主流算法框架下的网络轻量化。本文所改进后的网络经公开数据集训练与测试后显示,网络在准确率减少较小的情况下,参数量及运算量大幅降低。本文的研究内容主要分为以下几个部
学位
文章对基层卫生人员必须掌握的围绝经期综合征的病因及诊治等相关内容进行介绍。
期刊
扫描雷达超分辨成像技术无需硬件设备改造,仅通过改进信号处理就能够获得超越天线孔径限制的角分辨能力,在场面监视、路径导航、气象监测和目标打击等现代微波遥感应用中发挥着重要作用。然而,宽视场成像时,现有超分辨方法需要高维矩阵运算,难以满足实时信号处理的需求。因此,开展扫描雷达快速超分辨成像方法研究,具有重要的应用价值。针对扫描雷达宽视场实时超分辨成像需求,本文围绕超分辨成像机理、低秩近似快速方法和并行
学位
图像质量评价方法通过建立数学模型实现自动化图像质量预测,对图像处理具有关键性指导作用。实际应用场景中不断出现新的图像评价标准和失真类型,为图像质量评价研究带来严峻挑战。面对新出现的不同评价任务,现有方法通常采用模型微调以适应新任务,但基于旧任务的预训练模型泛化能力有限,无法有效处理多种评价任务。一方面,新旧任务间差异较大时,基于旧任务的训练模型在新任务上微调,收敛难度大、性能提升有限;另一方面,顺
学位
随着我国动车组列车运营规模的急速扩大,动车组检修也面临着日益严峻的挑战。基于人工的检修方式效率低、漏检率高;基于机器视觉的检修方式具有效率高、漏检率低的优点,为动车组检修提供了新的策略。常见的视觉信息有二维图像和三维点云。然而在采用基于机器视觉的动车组检修过程中还存在以下难点:1.缺乏高铁动车组列车静态检修场景(以下简称动车场景)三维目标检测基准数据集;2.3D扫描仪与相机的视场不一致,导致图像与
学位
微流体细胞培养技术的发展推动了器官芯片模型的构建,相比于传统模型,器官芯片具有高通量、可模拟在体微环境等优势。而目前的器官芯片的检测需要集成大量的微型传感器,使得器官芯片系统复杂,检测麻烦。相比之下,近几年发展出来的全液相流体装置显示出构建微环境易于检测的器官芯片的潜力。本论文从芯片的结构出发,制备了液体封装的微流体芯片,进一步利用这种芯片的开放性实现了芯片内任意位置的快速取样检测,以及流道结构的
学位
光致形变液晶聚合物材料在光响应驱动器、人造肌肉和微流控系统等方面具有广阔的应用前景。为了改善光响应液晶聚合物网络的可加工性能,将动态共价键引入光响应液晶聚合物得到越来越多的研究。二硫环戊烷开环聚合反应作为一种高效制备二硫化聚合物的方法,已经广泛应用于制备渗透性脂质体、线性和环状聚二硫化聚合物、凝胶材料的自组装和可逆交联和高强度多功能弹性体等领域。现阶段含有二硫键液晶聚合物网络的合成策略是利用硫醇氧
学位
独脚金内酯是一类植物激素,具有非常重要的生物学活性。独脚金内酯小分子类似物(包括独脚金内酰胺)具有高效除草剂、植物生长调节剂等作用。论文基于课题组合成多环的方法学的研究基础,以苯丙氨酸等氨基酸为底物,结合联用近年来新发展的C-H键活化和脱羧偶联技术,研究发现了合成苯并五元多环的新方法及高效合成独脚金内酯类似物的合成路线方法,该合成策略兼具高效和多样性合成的特点,为拓展独脚金内酯小分子库奠定理论基础
学位
近年来,我国城镇化水平的不断提高,国内各大中城市的常住人口逐年增加,相应的城市规模也在不断提升,许多城市都把修建地铁作为了构建适应于新时代要求的立体交通体系的重要途径。既是受上述国内大环境影响,也是顺应城市发展的需要,南通市也开始进行了轨道交通工程建设的相关工作。然而,自第四纪更新世以来,在地壳运动与古河流、古海洋等因素的共同作用下,南通地区形成了深达数百米的巨厚第四系沉积层,加之南通通江达海,地
学位
乙酰丙酸(LA)作为十二个最重要的生物基平台化合物之一,其下游产品的开发具有巨大的潜力和应用市场。其中乙酰丙酸加氢可以转化为γ-戊内酯(GVL),GVL可以溶于水、蜡和树脂等有机溶剂,可用作各种化合物的中间体,也可用作润滑剂、增塑剂、胶凝剂、汽油的添加剂等。乙酰丙酸加氢制备γ-戊内酯目前常用的催化剂往往需要用贵金属催化剂,高昂的成本限制了其进一步发展应用,因此,开发稳定、高效的廉价金属非贵金属催化
学位