论文部分内容阅读
目前,手机等移动终端已经成为多媒体传播的重要载体之一。随着显示技术和无线通讯技术的不断完善,将立体场景应用于移动终端将会作为新兴产品受到用户的欢迎。立体视频数据量是单通道的两倍,基于移动终端的立体视频需要更有效的视频压缩技术。H.264作为新一代的国际编码标准,具有更高的压缩比,更好的信道适应性以及错误隐藏能力,可以将其应用于移动终端的视频压缩中。本文在H.264编码研究的基础上,考虑到针对基于移动终端平台的立体视频的计算复杂度较低、只存在两个通道显示以及无线网络带宽有限的特点,对立体视频编解码进行深入研究。本文首先比较了当前主流的立体视频编码框架,其中包括双通道simulcast编码、联合视频编码、分辨率非对称编码、以及左视点加视差的立体编码方案,并从率失真性能来对各种立体编码框架进行系统评价,从中选择最适用于移动终端的立体编码方案。实验结果分析证明,在高码率端传统编码联合视频编码的性能较好;而在低码率端,分辨率下采样的立体编码在保证立体主观质量的同时,又节省了网络带宽,是一种较好的编码方案。其次,本文通过实验发现分辨率非对称编码方案的采样方向对编码率失真性能有重要影响,并针对这一现象进行了深入分析讨论。同时提出了一种利用左通道的帧内16×16宏块的水平和垂直预测的编码信息来预判右通道的采样方向。在不增加计算复杂度的前提下,保证非对称方案获取较好的率失真性能。本文的另一个工作是针对fehn提出的带有视差估计的分辨率非对称解码方案,在原解码方案中解码端除正常解码两个通道序列外,还需要对分辨率下采样的右通道进行分辨率恢复。在保证重建PSNR前提下,本文提出利用SKIP模式对其进行快速分辨率恢复,降低了上采样的计算复杂度。最后,针对立体视频编码实时性能的要求,本文提出基于移动终端的立体视频编码框架并在此框架下提出相应快速算法方案。该方案充分考虑到在立体视频编码中通常时间相关性大于视点间相关性的特点,减少参考帧和宏块模式的遍历时间,减低了立体视频的编码复杂度。