【摘 要】
:
随着3D显示和交互多媒体系统的迅速发展,多视点加深度(MVD:Multi-view Video plus Depth)视频已经成为新一代3D视频应用的主要方向,日益引人关注。与传统2D视频相比,MVD格式的3D视频可以给观众提供更加丰富的立体感和沉浸感,并且支持用户在一定范围内选择任意的观看视点。MVD中除了有各个视点的2D纹理视频外,还增加了对应视点的深度图。与纹理视频相比,深度图是灰度图像,表
论文部分内容阅读
随着3D显示和交互多媒体系统的迅速发展,多视点加深度(MVD:Multi-view Video plus Depth)视频已经成为新一代3D视频应用的主要方向,日益引人关注。与传统2D视频相比,MVD格式的3D视频可以给观众提供更加丰富的立体感和沉浸感,并且支持用户在一定范围内选择任意的观看视点。MVD中除了有各个视点的2D纹理视频外,还增加了对应视点的深度图。与纹理视频相比,深度图是灰度图像,表示了视频的场景几何信息,它并不在终端成像显示,而是通过基于深度图像的绘制(DIBR:Depth Image Based Rendering)技术用于绘制虚拟视点。由于深度图与纹理图的差异及其特殊的应用场景,使得用传统2D视频编码工具对深度图进行编码压缩不尽合理,会引起绘制的虚拟视失真。除了纹理深度的编码算法,纹理深度间的码率分配也对MVD视频的编码效率有重要影响。近年来,MVD高性能编码成为国际上视频编码领域的研究热点。本文对MVD视频高效编码的关键技术进行了深入研究,主要学术贡献及创新点包括以下几个方面:为降低MVD中深度图压缩带来的量化失真对绘制的虚拟视点图像质量产生的影响,提出两种面向虚拟视失真的深度图压缩算法。1)通过分析虚拟视绘制失真和深度图失真之间的统计数据,提出一种估计深度图失真引起的虚拟视失真的指数模型,通过预处理视频得到模型参数,并将此模型用于深度图编码的率失真优化(RDO:Rate Distortion Optimization)中。2)基于上述方法,通过分析不同的深度图区域失真引起的虚拟视失真,提出一种联合参考纹理深度图特性的虚拟视失真的模型,并将此模型用于深度图编码的率失真优化中,同时基于虚拟视失真调节不同深度图区域的量化参数(QP:Quantization Parameter)。实验结果表明,两种算法都可以准确的估计深度图失真引起的虚拟视失真,提高绘制虚拟视的客观质量和深度图编码效率,相比于3D-HEVC的视点合成优化(VSO:View Synthesis Optimization)可以降低编码时间;相比于方法一,方法二可以自适应于不同的3D视频,并且不需要预处理,算法复杂度更低。针对深度图的特性和用途,提出一种基于虚拟视质量的深度图编码快速算法。该快速算法主要包括:1)根据深度图和对应的纹理视频的特性,估计不同的深度图区域的虚拟视失真大小,对于虚拟视失真小的深度图区域,跳过虚拟视失真估计算法以降低编码复杂度。2)对于虚拟视失真小的深度图区域,使用大尺寸的块进行编码,提前终止3D-HEVC的四叉树迭代搜索;而对于虚拟视失真大的深度图区域,使用小尺寸的块进行编码,跳过大尺寸编码块的尝试,从而降低3D-HEVC深度图编码过程中四叉树块划分的复杂度。实验结果表明,该算法在几乎不降低编码效率的同时,可以显著降低深度图编码的复杂度。除了纹理视频和深度图编码算法,纹理与深度间的码率分配也对3D视频的编码效率有重要影响。为了提高3D视频的编码效率,提出面向虚拟视质量的码率分配算法。该算法主要包括:1)提出更精确的虚拟视失真与纹理深度图量化参数的关系模型。2)根据左右相邻视点纹理视频编码失真的差异,对于每一个图像组(GOP:Group of Pictures),自适应分配视点间的码率,提高绘制的虚拟视质量。3)根据已编码的相邻GOP虚拟视质量的差异,自适应地调节纹理深度间码率分配,提高虚拟视质量。4)调节深度图编码的拉格朗日乘子(LM:Lagrangian Multiplier),实现纹理深度间码率分配。实验结果表明,对于不同场景特性的3D视频,该算法都可以合理的分配视点间和纹理深度间的码率,以极低的算法复杂度动态的调节码率分配,使3D视频的编码效率达到最佳,增强MVD视频格式的实用性。
其他文献
格点QCD预言在高温高密条件下将会产生夸克-胶子等离子体(QGP),而随着QGP演变过程中温度的下降,QGP会相变为强子物质。利用美国布鲁海汶国家实验室(BNL)的相对论重离子对撞机(RHIC)和欧洲核子研究中心(CERN)的大型强子对撞机(LHC)能得到超相对论重离子碰撞产生的QGP和强子物质的实验数据。J/ψ产生的抑制是验证QGP存在性的一种有效信号。由于强子物质中的轻介子与粲素发生的非弹性散
复合材料是由两种或两种以上不同性质的材料通过物理或化学复合而成。复合材料的历史可追溯很远,如从古沿用迄今的稻草增强粘土和已使用上百年的钢筋混凝土均由两种及以上不同材料复合而成。复合材料可以发挥各种组成材料的优点,克服单一材料的缺陷,从而扩大了材料的应用范围。一般来说,复合材料具有重量轻、强度高、弹性优良、耐化学腐蚀和耐高温等优良特点,所以广泛应用于航空航天、汽车、建筑、衣料等领域。当组成材料的粒子
传统光学器件受到衍射效应的限制,其最小尺寸一般在半波长左右。这在很大程度上制约了光学集成电路的小型化和集成密度。为解决这个难题,我们需要突破衍射限制,进而获得各种亚波长尺寸的光器件。表面等离激元(Surface plasmons,SP)是目前纳米光子学领域的研究热点之一。它是指沿着金属介质分界面传播的表面电磁波(主要在红外和可见波段),其主要特性是电场强度在金属与介质的界面上具有最大值,远离金属表
基于美国哈里博顿石油公司的固井液态添加剂自动分配系统,通过“消化、吸收再创新”,应用虚拟增强现实技术进行设备国产化研制,需要研究虚拟装配关键技术。而碰撞干涉检验方法、装配工艺规划优化和可拆装性评价是近年来虚拟装配关键技术的国内外研究热点。一般用不同的方法对柔性和刚性物件的虚拟装配进行干涉检验,刚体碰撞检测多采用层次包围盒方法,变形体的碰撞检测主要是寻找提高检测速度和检测质量的方法。但由于采样技术的
随着现代社会的发展和科学技术的进步,金属材料在极端非平衡条件下的相变越来越引起人们的重视。纳米量热作为一种新兴的量热技术,具有高达107 K/s的加热冷却速度,可以原位获取金属材料在极端非平衡条件下的相变行为。相对于传统热分析技术,其热容灵敏度在纳米量级,可以检测到微弱的相变信息。除热力学和动力学外,纳米量热结合其它表征手段,可以对相变进行全方面的研究。这不仅有助于揭示极端非平衡相变的内部机理,还
人类社会的进步离不开新材料的发展,而新材料的开发和应用又推动着科学技术的发展和人类文明的进步。从1995年世界上第一块高质量YAG透明陶瓷开发至今,透明陶瓷已走过了20多个年头。倍半氧化物、石榴石型氧化物、硅酸盐体系等透明或半透明陶瓷被广泛用于透明窗口、无机闪烁体、LED和固态激光激励介质等方面。与YAG基质相比,Yb3+离子掺杂的镥铝石榴石(Yb3+:Lu AG)具有大的有效原子序数Zeff、发
本文提出一个适用于多轴有限变形非线性联合硬化的新弹塑性模型,用来模拟金属和合金的多轴热耦合疲劳失效.新模型与先前模型相比,有如下几个创新点:(i)对比于经典弹塑性模型,所提出新模型结构简单并且在下述意义上完全自由且是光滑的:该模型无需引入为表征塑性行为须强加的屈服条件以及加载卸载条件,而是自动包含这些塑性特征作为模型的固有本构特征,此外,该模型给出连续弹塑性切模量,避免了通常模型所涉及的模量强间断
玉米作为粮食作物的广泛种植为人类文明的进步做出了突出贡献。如今,玉米仍是重要的饲料、粮食作物及工业原料。玉米籽粒富含淀粉和蛋白质等,其中蛋白质的品质决定了玉米籽粒的营养价值。醇溶蛋白是籽粒的主要储藏蛋白,但其氨基酸比例不均匀,缺乏必需氨基酸赖氨酸和色氨酸,导致常规玉米的营养价值较低。Opaque2是玉米籽粒胚乳特异表达的转录因子,opaque2(o2)突变体能显著改善玉米籽粒蛋白必需氨基酸含量,是
工业合金在凝固过程中先析的固溶体初生相常以枝晶形貌结晶。枝晶组织决定了铸锭中晶粒和第二相的特征。掌控凝固过程中枝晶形貌的演化对调控铸锭组织,提高铸件性能至关重要。在材料制备过程中施加强静磁场,可改变体系内物质的传输行为,从而改变材料的微观组织。枝晶生长受凝固过程中传热和传质的影响,施加强静磁场可起到影响枝晶凝固过程的效果。本文以Al-4.5wt.%Cu合金和2024铝合金为实验对象,使用定向凝固方