3D视频中深度图优化和编码技术的研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:z360052113
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度图比纹理图更能节省码流以及能方便灵活的利用DIBR绘制出不同的虚拟视点,纹理加深度的多视点视频被认为是最有效的一种3D视频数据表达形式,深度信息将是3D视频数据表达中一个不可缺少的重要信息。与传统的纹理图相比,深度图具有物体内部平滑和边缘突出的特点,而且其不输出显示和观看,只用来绘制新视点。由于深度图和普通2D视频之间的差异性,使得直接采用传统视频技术对深度图进行处理不尽合理,因此本文将利用深度图的特性研究新的深度图优化方法和高效的编码方法。我们首先提出一种有效的深度图优化模型,该模型不仅能够消除深度图中噪声干扰的影响还能够避免物体边界的模糊,同时考虑像素间的色彩,空域和概率的相关性和高斯误差模型,通过对空洞周边纹理和深度像素的相关性度量,恢复空洞区域各像素的像素值。其次,我们提出基于深度图边缘特性的上采样算法。基于空域上下采样的深度编码框架中,下采样造成的边缘信息损失是影响合成视点质量的主要原因。利用3D视频中深度图与对应纹理图的边缘轮廓相似性以及深度图自身的空域相关性,设计基于协方差估计的自适应上采样插值模型,使得插值系数根据图像局部特征调整以保留边缘轮廓。最后,我们提出了基于视觉感知的深度编码方法。深度编码性能主要取决于绘制视点的主客观质量,在深度图编码时,既要考虑减小虚拟视点绘制失真又要保证失真测度与主观评价一致。因此本文深入研究了由深度编码产生深度值变化造成的虚拟视点绘制失真(用基于人类视觉系统模型的图像质量评价方法SSIM作为失真测度)的估计模型,并把它应用到基于视觉感知SSIM的RDO模型中。在深度图编码时,提出的RDO模型选择最优的宏块编码模式(即虚拟视点失真最小时的深度图宏块编码模式),能够提高绘制出的虚拟视点客观质量(SSIM度量)和主观质量。总之,本文通过利用深度图的自身特性,提出新的深度图优化方法和高效的编码方法。通过深度图优化方法能够获得完整精确的深度图,再利用本文提出的编码方法对深度图进行压缩编码能够获得更高的编码效率。
其他文献
雷达与通信技术已经取得了重大发展,随着电子对抗环境的日趋复杂,系统对集成度和性能的要求也越来越高,雷达与通信一体化是其中的关键技术之一。现在的雷达通信一体化系统设
由于无线传感网其具有低成本,低功耗,可进行远程监控和维护等优点,所以被广泛应用于家庭,工业,军事,医疗,抢险救灾等领域,实现数据的采集,传输和处理。无线传感器网络节点的定位是无线
随着人们对自然资源需求的日益增大,人们已经开始向深层地下以及深海进行矿产资源和海洋资源的开发利用,而超低频无线通信技术是对资源开发的机器设备进行遥控遥测的方便而有效
随着社会的发展,视频监控系统已走进了千家万户中,智能化是监控系统主要的发展趋势,而在监控系统中实现对运动目标的跟踪是智能化的重要体现。本文将智能视频监控作为研究重
在快速发展的无线通信技术领域,通信体制不断发展更新,通信信号的调制方式日益增加;以及各种通信之间相互干扰,通信环境日益复杂,因此,调制信号的自动调制识别技术在通信领域
运动目标检测是机器视觉领域的关键问题。在工业、航空航天、医疗保健和军事等多个领域,数字图像处理技术和机器视觉得到广泛应用,这其中对视频图像中运动目标的检测及分析是
随着智能手机的普及和无线宽带业务的发展,移动通信系统要求实现高速数据传输和充分的小区覆盖。为了克服基站增加发送功率将导致小区间干扰增大以及高频段信号传输衰减严重的
模拟示波器出现到今天已经有六十多年的历史了,80年代以来,数字示波器异军突起,鉴于数字示波器具备各种模拟示波器不具备的优良特性,已经全面取代模拟示波器。近几年,以北京普源为代表的国内数字示波器也如雨后春笋一般显现,在实时采样率和存储容量上也有长足发展,然而现在的数字示波器还具有体积大,质量大,价格高,操作繁琐,适用领域窄等缺点。因此自主研制一款体积小、重量轻、便于携带的手持式数字示波器成为必要。主
在现代化的电子对抗环境中,信号密集并且复杂多变,新类型体制的雷达在不断出现,雷达的抗干扰能力也在不断加强和完善,所有这些环境和要求都对雷达信号分选技术提出了新的严峻的挑
虎年伊始西江黄金水道建设喜讯连连:“世界经济危机影响下,2009年西江黄金水道广西经济腹地港口吞土量仍达1.49亿吨,同时增长16.76%,水路运力规模持续扩大,全区运力达435万载