全景视频主客观质量评价方法研究

来源 :武汉大学 | 被引量 : 0次 | 上传用户:tiyuanzhurenzsh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着相关技术及软硬件的发展,虚拟现实逐渐成为重要的多媒体应用形式,越来越多地出现在人们的日常生活中。作为虚拟现实的主要媒体形式之一,全景视频通过对场景的多角度拍摄和拼接,形成360度×180度的视频场景,通过头戴式显示设备将其投影至以用户为中心的虚拟球面空间,为用户提供仿若置身其中的沉浸感。然而,人眼的分辨能力极高,要实现尽可能真实的观看体验,对全景视频分辨率的要求很高,因此,全景视频的数据量往往较大,这对数据的存储和传输带来了极大的挑战。为在有限的资源和海量的全景视频数量间取得平衡,保证用户体验,面向全景视频的质量评价研究至关重要,可为诸如视频压缩、网络传输、视频后处理等各类任务提供质量上的指导,在提升算法性能的同时保证视频质量。目前,全景视频的处理依然依靠平面视频的方法框架,需先将球面视频依照某种投影关系映射至平面,再进行编码、传输等相关处理。而在质量评价任务中,由于视频最终仍将重投影至球面空间进行观看,传统平面视频的评价方法无法适用于全景视频,难以获得能够反映真实场景下视觉质量的评价结果。考虑以上所述问题,本文面向全景视频,开展主客观质量评价研究。首先,基于全景视频特性研究主观质量评价方法。考虑全景视频在观看中的特点,基于传统视频主观质量评价方法,设计了适用于全景视频的主观质量评价方法。此外,在主观质量评价中,测试视频的呈现方式十分重要,避免在视频播放时引入额外的质量变化是获得可靠的主观质量评价结果的首要前提。然而,一方面,头戴式设备固定的屏幕分辨率导致不同分辨率视频播放时产生采样;另一方面,全景视频的处理和播放分别在平面和球面进行,投影映射中的形变不可避免。为研究如何最大程度减轻采样与投影映射对主观质量评价带来的影响,本文建立虚拟球面与人眼、屏幕平面间的几何关系,提出全景视频主观质量评价视频分辨率最优化方法,最小化投影映射带来的额外质量变化,从而获得更加可靠的主观质量评价结果。其次,基于优化的主观质量评价方法建立面向压缩损伤的全景视频主观质量评价数据库,并将其应用于全景视频全参考客观质量评价方法的验证。在编码压缩等相关技术的研究中,为在提升压缩效率的同时获得尽可能好的视觉质量,主客观质量评价是不可或缺的步骤。考虑全景视频观看方式的独特性,传统视频的主观质量评价数据无法应用于全景视频的客观模型及处理技术等的验证。因此,本文基于优化的主观质量评价方法,设计全景视频主观质量评价实验方案,开展主观质量评价实验,建立面向压缩应用的全景视频主观质量评价数据库IVQ(Immersive video quality database)。对数据库的数据分布及被试人员行为的分析表明该数据库具备一定的代表性与可靠性,可有效地服务于全景视频客观质量评价方法研究。基于IVQ数据库,对目前常用的全景视频客观质量评价方法及经典的传统视频质量评价方法进行了性能验证与分析。结果表明,目前全景视频的客观质量评价方法性能虽已有了一定的改进,但与主观质量的相关性仍相对较低,仍然是十分值得深入研究的课题。最后,针对全景视频通过球面观看的特性,设计全景视频无参考客观质量评价方法。不同于传统平面视频,经过处理的全景视频投影平面需投影至球面进行观看,而投影平面与球面间存在着一定的拉伸和形变,因此,投影平面的视觉质量不能等同于全景视频真实的视觉质量。本文针对这一问题,提出基于球面特征的全景视频无参考客观质量评价方法。质量评价过程中,在球面空间进行特征提取,从而获得能够反映全景视频球面观看中的视觉质量的视频特征,并利用多核学习方法对视频特征进行融合,得到质量评价分值。本文在IVQ数据库上进行了实验验证,并与常用质量评价模型进行了性能对比。实验结果表明,本文所设计的方法与主观质量的相关性高于直接使用传统视频无参考质量评价方法所得结果,同时,与全参考视频质量评价方法相比仍有一定差距,这也表明面向全景视频的无参考客观质量评价方法仍然值得进一步的研究。
其他文献
球墨铸铁用的球化剂由球化元素、硅、铁(铜、镍)组成,球化剂根据其主要球化元素分为镁系球化剂、稀土系球化剂、钙系球化剂,不同类型的球化剂有不同的特点,应根据铸件不同的种类、牌号和不同的炉料选取不同类型和不同成分的球化剂。生产合格的球墨铸铁件,在正确选择球化剂种类和成分的前提下还要正确确定球化工艺参数。
作为一种廉价的金属氧化物,氧化铜(CuO)纳米材料同时还具有很高的电化学比容量(674 m Ah/g),因而被认为在离子电池电极材料领域具有极大的潜在应用价值。本论文基于原位透射电子显微学方法,探究CuO纳米线的微观生长机制,并研究CuO纳米线相关复合结构作为离子电池的电极材料的充放电过程,论证了其作为电极材料的可行性。具体的研究内容和结果如下:1.在CuO纳米线的结构表征及其微观生长机制方面。我
背景:肺癌作为世界范围内最常见的恶性肿瘤之一,其高致死性严重威胁了人类的健康。非小细胞肺癌(non-small cell lung cancer,NSCLC)占据了肺癌中的大部分。尽管随着技术的发展,肺癌的诊断和治疗技术出现了长足的发展,但是总体的预后仍然不容乐观。一方面,由于许多的NSCLC患者在察觉时已经处于中晚期阶段,失去了最佳的治疗时间窗;另一方面,对于药物以及放射治疗的耐药也限制了治疗的
学位
【目的】检验胺碘酮脂质体药物对新西兰兔心肌缺血再灌注损伤(MIRI)后的心肌组织是否具有靶向效应,并观察其是否具有减少MIRI后心肌细胞凋亡的作用并探讨其中可能机制。【方法】通过优化的薄膜分散-超声-膜挤出法制备胺碘酮脂质体,结扎/再通新西兰兔左冠状动脉前降支(LAD)建立缺血再灌注(I/R)动物模型,并用心电图、心肌损伤标记物及心肌组织切片HE染色对模型进行检验。通过在I/R新西兰兔模型上,分别
第一部分免疫相关基因改变可作为乳腺癌预后的潜在标志肿瘤微环境(TME)是导致乳腺癌进展的异质系统。癌症基因组图谱(TCGA)数据库提供了全球基因表达谱数据,便于进一步分析包括乳腺癌在内的各种恶性肿瘤。基于ESTIMATE算法,根据TME中的免疫或基质成分计算免疫和基质评分。我们将乳腺癌病例分为高分组和低分组,并鉴定了与总体生存率显著相关的差异表达基因(DEG)。我们进行了富集分析并构建了蛋白质-蛋
目的:通过开源多体动力学软件OpenSim仿真计算负重蹲起动作的肌力变化规律。方法:选择一名男性田径运动员为研究对象,同步Vicon红外捕捉系统、AMTI测力台和表面肌电记录运动学、动力学与肌电数据,通过SoildWorks、Matlab及OpenSim软件建立人体负重蹲起的数学模型,并优化计算出相关肌肉群肌力。结果:股四头肌分别在30%与70%左右时刻出现两次峰值,其值为10000N和9060N
随着人口老龄化的发展,养老需求与实际供给之间的矛盾日益突出。智慧养老作为我国养老发展的新趋势,为我国解决养老难、社区养老服务不健全等问题提供了新的契机。但目前社区养老服务中仍存在由于适老化设计标准的缺失而引起的服务设施与老年用户需求、认知不匹配、适用性、易用性较低等适老化问题。文章通过对社区智慧养老现状及问题的分析,梳理社区智慧养老服务的适老化设计的研究脉络与存在的问题,提出建构社区智慧养老服务的
期刊
"全域数治"是借助数字技术,创新治理机制、再造治理流程,并推动治理主体、治理要素、治理领域之间的有效协调,从而实现整体性、系统性和智慧化的治理。杭州市三墩镇较早开始"全域数治"的探索,已经走出了一条创新基层社会治理、建构数字政府的新路子,应充分总结其做法经验,进一步推动基层数字化改革实践以实战、实用为导向,打破壁垒,整合资源,不断拓展应用场景,以数字化撬动政府服务模式创新和服务流程再造。