Robust Depth Estimation Techniques in Computer Stereo Vision

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:wllzjw
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,机器在三维(3D)和距离上查看和感知环境的视觉能力是计算机视觉的核心。与二维(2D)视觉信息相比,分析三维视觉信息具有巨大的好处,有望得到更可靠和详细的分析结果。然而,3D计算机视觉的突破以深度估计技术的进步为标志。在3D计算机视觉中,立体视觉是深度估计的一种重要方法,它基于场景的两个视图(立体图像)之间的视觉差异进行操作。为了获得准确的视觉视差线索,需要在场景的两个视图中找到对应点的图像坐标。这个对应问题的解决方案是计算机立体视觉中具有挑战性的问题之一。本论文对计算机立体视觉中的深度估计进行了全面的研究。这项工作首先对理解计算机立体视觉中的几何问题所需的双视图几何进行了简明而明确的描述。我们进一步进行理论研究,展示了立体相机基线对深度估计任务的计算复杂性和准确性的影响。此外,本文详细研究了立体对应问题(立体匹配),这是计算机立体视觉方法解决深度估计问题的核心。至关重要的是,我们在传统和深度学习立体匹配框架中都贡献了强大的技术,以减轻立体匹配任务中的一些关键障碍。我们将这些贡献中的特点和创新思想总结如下:首先,我们提出了一种具有自适应边缘感知成本滤波器的双向立体匹配方法,该方法提高了视差(深度)预测的计算效率和准确性。特别地,与现有方法相反,所提出的方法提供了一种允许同时计算左右匹配成本量的匹配框架。此外,我们为自适应匹配成本量过滤设计了一个更通用的框架。与现有方法相比,该方案能够在成本量平滑和边缘保留之间实现出色的折衷。实验结果表明,该方法提供了高质量的视差图(深度图像)并加快了处理速度。其次,本文提出了一个鲁棒的统计和概率框架,用于对视差图执行推理和细化任务,以提高预测深度图像的质量。准确地说,我们设计了一种基于灵活区域的马尔可夫随机场(MRF)的视差图表示方法。该框架允许通过贝叶斯推理进鲁棒的分析和估计。此外,我们分别为错误检测和细化任务提出了软分割约束和插值方案。全面的实验和严格的分析表明,所提出的方法是有效的,可以显著提高预测噪声视差图的质量。最后,我们贡献了一个强大的尺度感知立体匹配网络来解决深度学习方法中立体匹配任务的两个关键挑战。最近,深度卷积神经网络(DCNN)是深度学习中的主要模型,在立体匹配任务中被证明比传统方法更有效。然而,由于不可避免的病态图像纹理和现实世界场景中多尺度对象的存在,立体对应问题中固有的模糊性也给DCNN模型带来了挑战。在这些具有挑战性的情况下,所提出的网络侧重于计算多尺度视差图,并通过融合它们以便获得更可靠和准确的预测。为了更好地利用多尺度视差图的互补优势,我们设计了一个强大的可训练尺度感知融合模型,在融合过程中整合置信图。该模型通过分析匹配成本量的不确定性和相邻图像像素之间的复杂视差关系来计算置信度图。与许多近来最先进方法相比,实验表明所提出的立体匹配网络实现了卓越的鲁棒性和泛化性能。总之,本论文的研究工作、贡献和发现为促进和推进计算机立体视觉研究提供了宝贵的信息。
其他文献
2.0μm单频光纤激光在高分辨率光谱学、非线性光学、激光雷达和引力波探测等领域拥有广阔的应用前景。2.0μm单频激光对人眼安全,可应用于大气中的相干探测和空间通信领域。相比于常见的1.0μm单频光纤激光,2.0μm单频光纤激光拥有更高的非线性效应阈值,在单频光纤激光输出功率提升方面更具发展潜力。此外,高功率单频光纤激光可应用于长距离相干探测,且其低噪声特性使得探测灵敏度更高。为了满足相关应用领域对
与普通绝缘体不同,拓扑绝缘体的边界上存在受体拓扑保护的边界态。这种边界态对结构参数的平缓变化不敏感,在信号的无损传输方面具有潜在的应用价值。除了在量子系统中实现电子的拓扑绝缘体,研究者们也试图在各种经典系统中寻找和实现拓扑绝缘体,包括光学、声学、机械、电路系统等等。其中,电路系统是最近几年才用于拓扑态的研究,并逐渐形成了拓扑电路这一概念。拓扑电路主要基于共振电路网络建立的,所需的电子元件简单;并且
应力发光材料是一种在外界机械刺激(如:拉应力、压应力、剪切力以及摩擦力等)作用下将机械能转化为光能的介质,在人工智能皮肤、结构健康诊断和应力传感器等众多领域有潜在的应用前景。本论文基于新型应力发光材料的设计与制备开展研究工作,针对当前生物体内应力分布原位、实时检测对应力发光材料发光波段、荧光强度和应用方法的需求,通过材料设计、机理研究和性能测试等方法,系统地开展了高性能近红外应力发光材料的设计、合
多视图聚类是机器学习的重要技术,旨在分析多个视图的数据特征对观测数据进行分组。由于基于张量的聚类分析有利于提取视图间的高阶相关统计,目前的多视图聚类研究重心从基于矩阵的子空间学习转移到基于张量的子空间学习。最近的研究表明,用三阶张量来表征多视图数据,并学习其低秩或稀疏的自表示张量实现多视图聚类是有效的,但是这些方法还存在一些不足。现有的算法,极大的依赖于本质的张量自表示学习,但没有考虑求本质张量的
"叮咚、叮咚……"一阵急促的门铃声传来,我急忙拿起听筒。"嘿,女儿,快下来看看妈妈买了什么?"我飞奔下楼,眼前一亮,这不是我梦寐以求的折叠自行车吗?我围着自行车转了又转,迫不及待地骑了上去,在楼下的小操场上绕了几圈。"妈,为什么要买两辆呢?""从今天开始,我们家就要实行‘低碳’生活了!以后去路途不远的地方,我和你爸就骑自行车带着你,不仅节能,减少汽车尾气排放造成的空气污染,还能锻炼身体,一举三得,
期刊
为保障某型涡扇航空发动机初始飞行前电源失效试验顺利开展,根据试验对发动机控制系统电源供电转换的要求,使用测量与控制集成的方式,通过硬件控制电路和LabVIEW软件设计,开展了该试验测控装置研制。实现了发动机稳定状态、加速性和减速性过程控制系统供电转换的控制,还实现了测量参数的同步采集。经试验验证,该装置满足试验对电源转换控制、测量参数采集的要求,解决了以往该类试验存在的问题,提高了试验效率,可推广
随着我国社会经济的快速发展和城镇化的进程不断增快,城市交通的繁荣发展也引发了诸如交通安全等众多社会问题,解决城市道路交通安全问题的核心是对交通事故进行科学合理的分析和预测。城市交通系统是由驾驶人、车辆、道路和环境四种因素组成的动态耦合系统,安全行驶过程是指驾驶人在道路及环境的组合影响下,使用安全可控的驾驶行为操纵车辆的过程,一旦车辆、道路和环境组合的外界刺激超过驾驶人心理预期,会导致驾驶人采用不当
细菌胞外电子传递(Extracellular electron transfer,EET)是细菌将细胞内代谢产生的电子传递给胞外电子受体的过程,是自然环境中物质代谢、元素循环、能量转换等过程的重要驱动力。基于微生物EET发展起来的生物电化学技术在污染物降解、环境修复、医疗健康等方面展现出了巨大的应用前景。目前对EET的研究主要以革兰氏阴性菌(如Geobacter和Shewanella)为主,而对革
第五代移动通信技术(5G)的出现和快速发展,引发电子设备,尤其是智能手机、平板电脑等朝着高性能、高集成和微型化的发展浪潮,进而导致其在极端狭小空间下产生超高热流密度。在狭小空间内实现高效散热成为现代先进电子设备研发与应用的重大技术挑战。超薄均热板具有优异的导热性能,较大传热面积和较好的均温性能等优点,是目前业界与学术界关注的焦点。然而,由于极大的蒸汽流动阻力,传统的气液异面超薄均热板设计难以实现极
花青素作为一类广泛存在于高等植物营养器官和生殖器官的水溶性色素,对植物生长发育和人体健康具有重要意义。前期研究表明花青素具有抗氧化、抗肿瘤、抗炎以及抗糖尿病等生物学活性,在预防癌症、心血管疾病、糖尿病等慢性退行性疾病方面具有一定的健康促进作用。黑色鲜食玉米作为一种新型特种鲜食玉米类型,除了具备鲜食玉米的口感好和营养丰富特性外,还含有丰富的花青素资源。然而目前国际对富含花青素的鲜食玉米的研究和推广还