Delaunay三角形模型基视频及立体视频编码算法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:lunxyxd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像/视频压缩编码是实现多媒体通信的关键。传统基于块的视频/立体视频压缩编码算法,因其平移的块运动/视差模型不能反映图像的真实运动/视差场,所以在甚低码率下,预测图像几乎不可避免地都会出现块效应,直接影响编码效果。为克服该类问题,基于对象的压缩编码算法将视频分割为各个对象,采用接近物体真实运动/视差的模型来描述图像的运动/视差场,但其难点在于实现视频对象分割。基于网格模型的压缩编码方法则可利用网格的连续形变有效地补偿视频对象的平移、旋转和缩放等造成的图像运动变化,同时网格的生成比视频对象的分割相对简单,因而成为近年来的研究热点。DT(Delaunay Triangulation)模型是压缩编码模型中常用的网格模型之一。基于DT网格的图像描述方法,其三角形网格节点在图像变化剧烈的地方比较密集,而在平坦的地方较为稀疏,网格节点可看成是图像的特征点。这种特性是许多应用(如图像编码、图像识别等)所需要的。 本文以DT模型基图像描述为基础,对。DT模型基编码技术进行了深入系统的研究:通过分析DT模型基应用于图像/视频编码的优缺点,改进了DT模型基的图像描述方法;深入研究了DT模型基视频及立体视频编码的重点环节,诸如运动/视差估计、残差图像处理等。主要研究内容和创新如下: 1)针对DT模型基图像编码方法不能实现实时编码的不足,根据图像的多分辨率表示方法,采用分层搜索的思想,提出了一种快速DT模型基图像描述方法。该方法通过逐渐精细的搜索步长搜索网格节点,减少了逐点搜索的次数,从而节约了时间,提高了运算效率,为实现DT模型基图像和视频实时编码奠定了一定的基础。 2)利用DT网格分析了彩色视频亮度和色度分量中目标之间的相关性,并利用这种相关性提出了DT模型基彩色视频编码方案。该方案仅对亮度分量进行DT网格描述,通过相似变换完成对色度分量的DT网格描述。在帧间编码时还采用了连续网格运动估计技术,避免了对每一帧都进行DT描述,同时与IVIPEG-4标准对运动预测过程中DT结构要保持不变的要求相一致。因此,该方案节约了编码时间和编码比特数,提高了编码效率。 3)深入研究了DT模型基立体图像/视频编码算法。首先,提出了一种可以保持DT网格拓扑结构不变的视差估计方法。其次,将这种视差估计算法和互对应(Cross Correspondence:CC)约束条件相结合给出了立体图像的编码方案,其中CC用来判断视差估计的准确性。然后,利用运动估计和视差估计中要保持网格拓扑结构不变这一前提条件,提出了一种基于DT网格的运动和视差估计相联合的立体视频预测算法。该算法以三角形为补偿单元,根据图像内容灵活地在运动估计和视差估计之间做选择,从而使得预测图像的质量最优。最后,把这些算法集成到立体视频编码中,给出了DT模型基立体视频完整的编码方案。 4)对适合网络传输的DT模型基渐进式视频编码进行了初步研究。按照DT网格节点在图像描述中的重要性顺序提出了DT模型基视频I帧图像渐进式编码方案。根据DT网格运动估计的特点,结合比特平面编码技术,提出了基于DT网格的视频P帧图像的渐进式编码方案。这些方案和MPEG-4 FGS一样把比特流分为基本层和增强层,解码器可以根据网络情况在增强层的任何位置停止解码,在甚低码率下可以提供更好的质量。 5)将DT网格模型引入图像分割领域。对图像DT描述后,通过分析网格节点的密度先提取比较清楚的目标轮廓,然后结合一些基本的图像处理算法轻松地实现了图像的目标分割。
其他文献
在图像成像、复制、扫描、传输、显示等过程中,不可避免地要造成图像的退化,而在许多应用领域中,需要清晰的、高质量的图像,因此,图像恢复具有重要的意义。图像恢复目的是对
在制造业全球化和网络化环境下,如何更好地利用全球制造资源,实现协同制造是制造企业提高竞争力的重要手段之一。由于制造网格中包含各种各样的具有动态性、多样性、自治性、
最新的视频编码标准H.264在具有优良的编码效率的同时,加入了很多误码恢复工具,例如片模式,参数集,数据分割等等,提高了抗误码特性。前向纠错码LDPC具有低译码复杂度,可线性时间编
全光场相机是一种基于光场成像的新型成像系统,它通过在主透镜与传感器之间加入微透镜阵列来获取场景的四维光场,即二维空间信息和二维角度信息,具有其它传统相机无法相比的
电子商务、电子政务及网络的普及使得信息安全变得越来越重要,同时,由于Web的广泛性和易用性等原因,基于Web的应用成为网络应用中最具有代表性的一个方面,为Web应用系统的提
1.前言  新型混凝土横孔连锁空心砌块(如图1.1)新研发的一种新型墙体材料,它弥补了目前国内外采用的竖孔空心砌块的不足。干砌的填充墙体内部方便布置横向管线,并可在墙体内布置水平横向钢筋混凝土带,墙体刚度大,整体性好。采用新型混凝土横孔连锁空心砌块干砌的填充墙体,符合国家墙体改革的宗旨和要求,更具有干砌、防渗、轻质、抗裂、节地、节材、保温、隔热、节能、环保等多种优点,克服工程建设通病、提高工程质量
期刊
环境噪声和竞争说话者的干扰是语音通信过程中常见的干扰情况。人的听觉系统可以在嘈杂的多个讲话者的环境中区分和跟踪自己感兴趣的语音信号,并分辨出自己所需要的声音,这种
作为短距离无线通信的关键技术之一,特别是室内通信领域,超宽带(Ultra-Wideband,UWB)一直受到广泛关注。这主要根植于超宽带信号的独特优点:以低占空比的冲激脉冲避免符号间
传统的固定视频业务已经难以满足媒体信息多元化的要求,随着全球移动数字电视广播网络的建立和完善,手机电视和DMB(Digital MultimediaBroadcasting)产品正在悄然兴起。2005
由于数字图像/视频的数据量巨大,对其进行压缩编码以便于存储和传输是普遍的做法。传统上衡量一种图像/视频编码算法的主要指标有两个:压缩效率和重建质量。怎样以最小的数据