立体视频质量评价关键技术研究

来源 :上海大学 | 被引量 : 8次 | 上传用户:moowoo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着国内外3D电视频道的播出,立体视频已逐步进入普通用户的家庭。提供给人们立体感的视频包括两种,一种是由两个视点融合而成的双视点立体视频,这种技术是目前3D频道所使用的,对应的显示设备一般要佩戴立体眼镜;另一种是由2个以上视点组成的多视点视频,这种技术可为用户提供多个角度的立体场景且对应的显示设备常常是不需观看者佩戴立体眼镜的裸眼观看方式。立体视频处理从采集到用户端显示要经历3D内容获取、预处理、编码、传输、解码/视合成和显示六个阶段,每一个处理阶段都会产生相应的失真,影响视频的质量,尤其是减少数据量的压缩编码阶段,因此评价立体视频的质量非常重要。然而立体视频不同于一般的2D视频,普通的2D视频评价方法不能直接用于立体视频的质量评价,因此,评价立体视频的质量成为立体视频发展过程中一个十分重要又亟待解决的问题。现有的立体视频客观质量评价方法虽然不如主观方法那样需要特殊的环境和设备,且费时较多、不能立刻给出评价结果,但与主观评价结果的吻合度不好,且不能很好地反映人眼的视觉特性。本文对立体视频客观质量评价方法及其关键技术进行了深入研究,主要贡献及创新点包括以下几个方面:1)利用立体视频的特性,对传统的JND模型加以改进,建立双目最小可辨失真模型,获得可用于评价立体视频质量的表示式BPSPNR。实验证明,与常用的PSNR和PSPNR相比,BPSPNR在主客观评分的相关性和数据样本的分散度上,更接近于人的视觉感知。2)提出了三种全参考评价方法。(1)对于多视点视频,根据2D视频与多视点视频之间的相关性,将2D评价方法与视间差值图相结合建立了全参考客观评价模型,将其用于分析PSNR、SSIM、VQM三种评价表示式的多视点视频各路视频的质量。实验表明SSIM最适于视频质量的评价,PSNR最适于立体感知质量的评价,而VQM不适于立体感知质量的评价。(2)对于双路图像合成的立体图像,根据人类视觉更关注立体图像深度感和感兴趣区域的特点,提出基于纹理图和深度图感兴趣区域的质量评价方法。对纹理图和对应的深度图利用视觉关注度提取工具提取感兴趣区,并根据各感兴趣区的感知程度分配权重系数。实验表明,该评价方法与人类视觉感知有较好的一致性。(3)对于视点合成算法合成的虚拟视点,提出一种基于边缘差异的虚拟视图像质量评价方法。在分析失真虚拟视与原始视像素差异基础上,对各差异像素进行分类,在分配权重时,对边缘像素施加较高权重。该方法相比于其它评价方法,能更好地预测人类视觉对虚拟视图像的主观感知。3)对基于MVD所生成的虚拟视,提出一种在缺少参考视点情况下的无参考质量评价方法。该方法通过计算用以生成虚拟视的纹理图和深度图边缘的结构相似度、结合虚拟视的边缘块失真来评价虚拟视的质量,实验证明该方法能够反映虚拟视图像的质量。4)针对人眼视觉对空间时间深度变化的灵敏度特性,研究人眼对深度细节感知的最小可察觉差值,通过大量的主观实验进行推理和分析得到刚可察觉深度差异模型(JNDD),并将此模型应用到深度图的优化处理中。提出的基于JNDD模型的深度图三边滤波算法在降低深度编码码率的情况下,可使合成虚拟视图像中物体的边缘更加平滑,证明了所建立的JNDD模型的合理性。
其他文献
一个繁荣、富裕的国家,为什么要尊重国家神话和传统节日?托德·G·布赫霍尔茨(Todd G. Buchhol)是一名经济学者,拥有剑桥大学经济学和哈佛大学法学的高级学位,可谓是
光机系统的设计以及装调是决定光学系统成像质量的关键因素,也是光学研究领域极为重要的两个部分。在现在的光机设计过程中,计算机辅助公差分析技术往往只涉及对光学公差部分
目的:探讨不同分娩方式对新生儿应激性反应的产生及儿茶酚胺类激素水平的影响。方法:回顾性分析180例分娩的新生儿,根据分娩过程中的情况,分为经阴道正常分娩者为阴道分娩组(Ⅰa
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield
水平井是渤海油田新区开发及老区井网调整的重要手段,水平井检泵作业中修井液漏失情况十分严重,漏失导致储层污染,作业后产能恢复困难.实验及现场应用表明,渤海油田常用的“
新一轮的产业革命和技术变革,对应用型人才提出了新的要求,既需要高层次的工程应用型人才,也需要大量适应新技术和满足产业发展需求的高素质技能型人才。职业院校是培养技能
伏羲氏早在五千多年前,就已经开始用「巨观」与「微观」的方法来研究天文地理与鸟兽纹理,进而创设了能类象万物的八个基本元素。易经旨在教人如何法效自然之道与实践生命的智
深度追踪信息化历史进程中的热点事件:现场真实记录企业变革、管理变革、企业战略与IT融合中CIO们的探索与实践。故事带来震撼,细节激发思考。
随着数字化、网络化等高新技术的广泛运用,以互联网为代表和数字技术为基础的新兴媒体席卷而来,广电行业正迎来一个全新的发展阶段——全媒体时代。与以往不同的是,全媒体时
俄文“镇压反革命”不能理解为通通枪杀,它包括死刑、驱逐出境或流放、监禁三种形式。综合1954年2月苏联总检察长、1990年苏联国家安全委员会(克格勃)、1992年8月俄罗斯联邦