可分级的多视点立体视频编码及传输关键算法的研究

被引量 : 0次 | 上传用户:sunzhiqiang7310
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机硬件和立体显示技术的迅速发展,多视点立体视频逐渐进入我们的生活。多视点立体视频包括不同视点视频的整合应用,使用者能除了能感受到立体的场景之外,它也提供收视者与播放系统间的互动性。多视点立体视频系统不同于以往的视频特性,为了使收视者能感觉到画面深度的变化,通过相关的播放系统,能够将拍摄的场景从各种角度完整忠实呈现给收视者。利用多视点立体视频多视角以及立体影像重现的特性,收视者能够体验到不同于以往的视觉效果。相对于传统视频而言,多视点立体视频的数据更为庞大,且各视点间存在极大的相似性,因此开发高效率的多视点立体视频压缩技术便显得格外重要。为了达到任意视点的立体视频交互响应,各视点视频资料以及交互式呈现系统所需的视差信息以及切换信息都是不可或缺的,如何有效的压缩这些信息将是未来多视点立体视频压缩技术的研究重点。在研究多视点立体视频编码的同时,客户端硬件环境和网络环境也需要同时考虑。尤其近来随着手机运算能力的提高,透过手机观赏数字电视已不再是梦想,移动影音服务的质量逐渐成为备受重视的新领域。但因为网络环境及封包传输行为的不同,必须依据其特性分别加以处理,如何能够随着现有带宽状况快速调整多视点视频当前码率,以增进系统效能与影音服务质量便成为重要的课题。本文根据多视点立体视频的特点,通过多视点立体视频其视点间高度相关性,研究了如何快速提取多视点立体视频的深度图,并且优化视点间互相参考编码的参考架构,降低视点间的冗余计算,提高多视点视频的编码效率。然后提出了可分级多视点立体视频编码的并行架构,最后对该编码方案在网络上的传输策略进行了研究,使视频数据流具备快速随机切换能力,提高了多视点立体视频的应用范围。本文的主要研究工作如下:(1)针对多视点立体视频中现有的深度估计准确性差的问题,本文研究了如何快速准确的提取多视点立体视频的深度图用于后续编码算法。包括如何在多视点立体视频的多个视点的图像上找出尺度不变的特征点,并建立特征点的对应关系,然后利用特征点的关系使用自适应的匹配算法建立局部匹配。综合运用了光流法、马尔可夫随机场等算法,可以让初始深度图在视觉上更舒适和保留细节,并且在时间域上形成连续的深度结果,减少弱纹理区域的错误及异常值。(2)根据不同视点图像彼此的相关性和深度信息提出了快速模式选择算法。根据邻近视点图像压缩时选择的模式来减少每个宏块需要计算的模式数量,结合以基于阈值的提前中止模式选择机制来进一步的加速模式选择的流程。同时利用运动矢量补偿的结果去决定是否需要计算视差矢量补偿,分别减少运动矢量补偿和视差矢量补偿的搜索范围。(3)在基于可分级视频和多视点视频的并行化算法的研究基础之上,提出了可分级多视点视频并行化编码算法。针对可分级多视点立体视频编码的存取单元、预测顺序、编码结构进行了研究,使可分级多视点立体视频编码能获得根据视点的数量和扩展层的数量调整编码的能力,‘并综合提高了编码性能。(4)由于在可分级多视点立体视频的播放过程中,客户端可以自由的选择不同的视点或者码率。为了在不增加太多存储空间但又能提高视频的切换速度的情况下,本文研究了通过SP帧使视频传输支持无缝切换的多层可分级视频编码方法。该方法根据多视点立体视频的特点,同时具备非可分级视频编码的高编码效率和可分级视频编码方法的灵活性,从而在更宽的带宽范围内获得了更好的流化视频服务质量,并且减少了视频占用存储空间的大小。综上,本文以可分级多视点立体视频的编码效率为目标,在视点间相关性的基础上,分别对深度图生成、模式选择、快速估计、并行编码和码流切换等问题进行了深入研究,并给出了相关的仿真实验与性能分析结果。
其他文献
<正>《法和经济学的未来》是87岁的美国联邦第二巡回法院资深法官圭多·卡拉布雷西(Guido Calabresi)对自己的整个学术生涯以及"法和经济学"这个学科的生涯进行反思和重构的
<正>任祥女士是位有心人,她有一个大愿望:希望曾经在我们生活中呈现过的传统文化中各种美的面貌不要从我们记忆里消失,因而下足工夫,编撰了这本《传家》,这是一本美的百科全
随着我国经济的大力发展,土地建设需求的不断增加,城市的国有土地资源已相对紧缺。对农村土地进行征收,成为当前我国扩大建设用地的主要方式。而有关集体土地征收补偿的相关
本文分析了改革开放以来,我国汽车业广告语的变迁。并借助这一变迁,从侧面分析了我国改革开放以来汽车行业的发展变化。
精准扶贫是我国实现中国梦过程中出现的新方案,对于推动我国经济的发展有着重要的作用。最近审计署办公厅新颁布的《关于进一步加强扶贫审计促进精准扶贫精准脱贫政策落实的
位于浙江省余姚市大岚镇东南部的柿林村,是一个以自然风光和传统古村落为主韵,结合休闲运动、红色文化于一体的特色旅游山村。它依山而建、西高东低、错落有致、布局紧凑合理
目的探讨ICU危重病人使用微量注射泵的护理方法及使用中存在的问题,寻找相应护理对策。方法回顾分析200例ICU病人应用微量注射泵的临床护理资料。结果ICU病房中应用微量注射泵
<正>时下正值小麦返青期,是浇返青水、施返青肥的最佳时机,但有些田块浇水施肥后虽出现暂时返青,而后却继续黄化。究竟是什么原因?现将小麦不同原因引起的黄化给予分析,作为
余姚地处浙东宁绍平原,南列四明山(古称句余山)、北临杭州湾、东接蛟门、西通曹娥、中有姚江、北泻流经上虞,向东与奉化江河汇成甬江,直趋入海。因南有句余,北有姚江,故名曰"余
叙述单端反激式原理、电流控制型电路优点、UC3845芯片特点 ,提出了一个实用的高频开关电源