基于立体匹配的光场图像深度估计算法

来源 :天津大学 | 被引量 : 0次 | 上传用户:estone
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
光场成像设备能够同时记录场景传递光线的位置信息和角度信息,将传统的二维图像扩至四维,更具有可塑性,围绕光场图像进行的有关计算机视觉领域的研究引起了广泛关注。其中,深度估计作为计算机视觉领域的一个分支,具有深远的研究意义和广泛的应用场景。基于光场图像的深度信息获取属于被动式深度获取方式,充分地发挥了由光场相机得到光场数据的优异特性,避免了单目深度估计和传统多目深度估计之间的矛盾。立体匹配算法可以对光场数据中的对应像素进行匹配,得到每个像素点的视差,进而得到深度信息。然而,传统的立体匹配算法在计算视差时具有对应像素匹配精度不高,深度估计不准确等问题,同时,在复杂遮挡情况下,具有深度估计不连续、不平滑等现象。本文研究了光场图像深度估计立体匹配算法,并针对光场图像中的遮挡问题进行处理,研究了一种抗遮挡的光场图像深度估计算法。
  基于以上的分析,本文主要的研究内容和创新点如下:
  (1)提出了一种改进的基于立体匹配的光场图像深度估计算法。通过分析光场“子孔径图像”的特性,设置不同的偏移标签进行偏移,从方差与梯度误差和两个方面建立匹配代价函数,利用引导滤波进行边缘保持,再将最小的匹配代价对应的标签作为视差估计的初始结果,最后用常时加权中值滤波进一步优化,得到准确连续的深度估计结果。
  (2)提出了一种光场图像遮挡问题的处理方法。通过对光场图像中的遮挡问题进行分类,对复杂遮挡问题进行建模分析,基于光场图像中像素在空间域和角度域一致性原理上,利用光流算法和聚类算法处理光场图像的遮挡问题,提取出更加准确的光场图像遮挡边缘像素和遮挡聚类结果。
  (3)提出了一种抗遮挡的光场图像深度估计算法。在光场图像遮挡问题的处理方法基础上,利用改进的立体匹配算法中设计的方差与梯度误差和建立匹配代价函数进行深度估计,而后利用马尔科夫随机场和常时加权中值滤波进一步优化,在遮挡物体边缘处得到更加准确锐利的深度估计结果。
  实验结果表明,本文研究的算法在主观和客观上都有较好的实验结果。主观上可以观察到连续清晰,边缘锐利的深度结果,客观上平均MSE评价指标均小于其它对比算法。
其他文献
空间谱估计作为阵列信号处理的一个重要分支,其目的是确定空间中入射源信号的来向。经典的DOA估计算法大都基于精准阵列流型,而没有考虑实际应用中不可忽略的互耦效应等因素,导致其实测性能大幅降低。因此,研究互耦情况下的测向算法具有重要的实用价值。此外,由入射源信号的统计特性,可将其分为圆信号和非圆信号。目前大多数算法默认入射源信号是圆信号,只利用其协方差非零的特点完成测向操作,导致可探测最大入射源数目少
随着5G新无线电接入技术(New Radio Access, NR)的不断发展,人们对大容量、低延时、高可靠、高速度、低功耗通信的需求更加迫切。在数字通信系统中,信道编码是5GNR的关键技术之一,而海量的信息数据传输对5G信道编码提出了更高的要求。低密度奇偶校验(Low Density Parity Check, LDPC)码作为5GNR的信道编码中数据信道的长短编码方案,将继续发挥不可或缺的作用
火灾早期,通常先有烟雾产生,随后才是火焰,因此烟雾检测能够提供比火焰更为及时的报警线索,对于确保人民群众的生命以及财产安全、推进火灾预防领域的发展意义重大。传统的烟雾检测方法通过监测空气中烟雾颗粒产生的物理变化来进行烟雾报警,比如温度、浓度等。但此类方法在时间和空间上均受到限制,从时间来说,烟雾浓度需达到一定范围才可以被传感器感知,这很可能导致最佳救援时机的错失;从空间上来说,一些开阔的室外环境也
学位
随着互联网技术的发展,海量图像数据不断涌入,人们对从海量数据中检索有效信息的需求不断增长。同时,近年来随着手机、平板等触摸屏技术的发展,基于草图的图像检索(Sketch-based Image Retrieval, SBIR)成为一种较为直观和有效的图像检索方式。相比于其他基于内容的图像检索方式,草图作为查询输入可以更好地描述关键信息,且更为直观和简洁。因此,基于草图的图像检索引起了研究人员的广泛
目标检测是计算机视觉中的一个主要研究方向,并且有很多实际的应用,比如无人驾驶、智能医疗等。传统的目标检测算法主要基于手工提取的特征以及可训练的浅层结构。近些年来,随着深度学习技术的快速发展,越来越多的研究人员趋向于用深度学习的方法解决计算机视觉任务。由于深度学习能够提取出更深层次、更高语义级别、更加鲁棒的特征,基于深度学习的目标检测算法在该领域取得了突破性进展。但许多复杂的应用场景既对目标检测系统
学位
随着显示器硬件制造水平的提高以及人们对显示器视觉质量需求的提升,数字显示器已经逐渐可以显示具有高比特深度的高动态范围内容,以提供更多、更细致的颜色表示,提高图像显示的视觉质量。然而,受限于图像采集设备,大多数图像视频以低比特深度形式存储。当这些低比特深度图像经过简单处理后直接在高比特深度显示器上显示时,图像的颜色平滑渐变区域会有明显的伪轮廓,降低了视觉质量。因此,研究合适的图像比特深度增强算法具有
近年来,3D处理技术的发展推进了立体视频的商业化进程。然而,任何3D处理技术都会造成立体视频的质量下降、立体感缺失等问题,从而影响人类的观看体验。因此,如何根据立体视频的特点,构建更加符合人类视觉感知的立体视频质量评价模型,已成为计算机视觉研究领域的关键问题之一。目前,立体视频质量的评价方法主要包括基于特征提取的方法、基于稀疏表示的方法和基于深度学习的方法。卷积神经网络作为深度学习的重要技术理论,
学位
在恶劣天气下,图像采集设备受到大气悬浮粒子(例如:雾、霾和小液滴等)的影响,导致图像产生颜色失真、对比度降低以及细节丢失等问题,不仅影响图像视觉效果,还会影响计算机视觉系统的分析与处理。因此,如何设计高质量的图像去雾算法成为亟待解决的问题。  本文介绍了图像去雾算法的研究背景和现状,讨论了大气散射模型、深度学习和生成对抗网络相关理论,以生成对抗网络为基础提出了两种图像去雾算法。具体工作包括:  首
学位
在语音信号处理系统中,噪声信号会对系统性能造成极大损害。因此,通常采用语音增强技术滤除语音信号中的噪声污染,以提升该段语音的质量。在实际应用场景中,噪声种类的丰富性和噪声特征的多样性大大限制了语音增强算法的性能,降低了增强后语音信号的质量,特别是信号的可懂度。因此本文提出了一种基于噪声分类的语音增强系统,主要包括以下三个部分:语音端点检测、噪声分类和噪声功率谱估计。  首先,使用语音端点检测算法区
学位
激光测距由于原理简单、可靠性强、测量距离远而广泛应用于航天、测绘、军事等领域。随着应用的不断深入,人们对于激光测距系统的尺寸、精度、功耗、测距范围等方面提出了更高的要求。因此采用更小尺寸、更低功耗、能实现更高精度、更大范围测量的单光子激光测距具有特殊的意义。  本文实现了基于时间相关单光子计数(Time-Correlated Single Photon Counting,TCSPC)的光子计数激光
学位