论文部分内容阅读
三维(Three dimension,3D)视频是正在兴起的一种媒体形式,并处于蓬勃发展的阶段。相比于传统的二维视频,三维视频能提供所观察物体的深度信息,从而使用户产生立体视觉的体验,某些三维技术允许用户在欣赏节目时自由的选择视点,切换视角。人们对三维技术预期的应用市场非常广泛,包括3D电影,3D视频会议,3D卫星成像,人机交互视角选择功能等。但是三维视频除了包含大量的正常颜色信息外还有额外的深度视频,这就导致了巨大的数据量,能否大幅度的压缩三维视频数据将成为这种媒体技术能否大范围应用的主要限制条件。同时,三维视频展示了一些的新特点,比如深度信息与颜色信息间的运动相关性,再如深度信息不具备纹理信息等,这就对研究出高效率的三维视频压缩算法提供了新的解决思路,而这也将推广三维视频技术的应用市场。因此研究三维视频的压缩处理技术不仅具有广泛的应用价值而且具有一定的理论意义。三维视频包含多视角颜色信息和相应的深度信息,基于这种媒体组织形式,本文研究了三维视频中深度信息处理的两项关键技术,主要工作和创新之处在于:1.提出一种新的利用压缩深度信息提高三维视频编码效率的方法颜色信息和深度信息是构建三维场景的基本要素,二者缺一不可。但有研究显示,人眼在场景切换之后对深度的敏感程度远小于对颜色的敏感程度,这就允许在这段时间不提供深度信息。因此本文提出一种面向场景切换的压缩处理三维视频的方法,基于现有的虚拟视角生成技术:分层深度视频技术(Layered depth video, LDV)和视频压缩技术,可以明显的提高三维视频整体压缩性能。相应的主观测试表明该方法不会降低三维视频的主观视觉质量。2.研究深度视频质量对合成虚拟视角质量的影响探讨深度视频质量对视角合成效果的影响可以有效的指导三维视频编码中颜色信息和深度信息间码率的分配。对于只关心虚拟合成视频的用户而言,视角合成过程中用到的颜色信息和深度信息都是不可见的,此时是不是需要二者均达到质量最优才能合成最好的虚拟视频是个值得商榷的问题,目前已经有研究显示按照一个合适的比例给不同视频分配带宽可以带给用户不错的视觉体验,相应的对深度信息增加更多的带宽并不能带给用户更多的画面享受。本文继续通过实验证明,低分辨率的深度视频用于视角合成中并不会明显降低合成虚拟视角的质量,即低质量的深度信息是可用的。