单张图像的深度信息重建研究

来源 :北方工业大学 | 被引量 : 0次 | 上传用户:liongliong595
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从二维图像中感知深度是计算机视觉领域中的一个重要研究方向,其可以广泛应用于智能驾驶、三维重建、图像分割、机器人视觉等相关任务中。其中,从单张图像中重建深度信息更具有挑战性。随着近年来深度学习技术的快速发展,涌现出许多从单张二维图像重建深度图的深度学习网络算法,但依然存在预测精度低、部分深度信息丢失、边缘模糊等问题。因此,本文研究使用深度学习网络解决单张图像深度信息重建问题的方法,主要工作如下:(1)提出了一种多尺度融合结构的编解码网络。该网络以编解码结构为基础,在编码器端提出一种多尺度融合结构,将低维特征图与高维特征图融合,保持其相关的位置空间关系,以提高编码器编码能力;在解码器端提出另一种多尺度融合结构,通过将高维特征图与低维特征图相融合,增加网络的细节保持能力,以提高解码器的解码能力,使网络性能达到最佳。(2)在通用室内、室外数据集上验证了本文算法的有效性,并通过消融实验(Ablation experiment)分析各改进对网络性能的提升作用。在通用的室内数据集NYUD v2上,本文实验结果与2017年CVPR文章“多尺度+条件随机场”的δ1评估指标相比提高了1.849%,rmse(Root mean squared error,均方根误差)指标降低了14.1%;在通用的室外数据集KITTI上,本文实验结果与2018年CVPR文章“单目视频+姿态估计”的δ1评估指标相比提高了6.6%,rmse指标降低了4.3%。(3)提出了一种深度图像质量评估方法SSIM-GC(Structure SimilarityGradient Correlation,结构相似度-梯度相关性),其可以用来表征图像的清晰度,从而更全面的评估深度图像质量。传统的平均相对误差、对数平均误差、均方根误差等参数可表征预测深度图与真实图之间的绝对差异,但不全面,往往参数好的预测图像反而看起来更加模糊。因此本文在相似度参数SSIM的基础上融入梯度相关性,得到一种符合人类视觉的图像评估算法。综上,本文提出的多尺度融合结构编解码卷积神经网络对单张图像的深度估计任务有更好的性能表现,图像质量评估参数SSIM-GC可更全面的表征深度图的质量。
其他文献
随着海南国际旅游岛建设的提出,村落旅游迅速发展,不仅促进了新农村建设,也满足了人们回归自然的心愿,村落旅游逐渐成为海南乡村聚落发展的一大趋势。然而村落旅游这一新的生
随着城市化进程的加快,城市热岛和雨岛效应的影响逐渐增大,城市区域的降水频率和降水量也相应增加。此外,原有的透水面逐渐转化为不透水面,下渗过程遭到阻断,地表蓄滞作用降
近年来,我国钢铁工业发展迅速,钢铁产量规模位居世界前列。因为钢铁被广泛应用于社会的各个领域,例如桥梁、高楼、船舶、机械、铁路以及航空等,因此,钢材的质量会直接影响到
无线传感器网络(Wireless Sensor Network,WSN)是物联网的关键技术,在很多领域都有着广泛的应用。WSN的特点是传感器节点多、网络规模大,通常部署在暴露的外部环境中,因此很
利用微纳结构对光波幅值、位相、偏振等一种或多种参数进行空间调制和变换,可产生选择性反射以及光变色效果,在防伪、加密等领域引起了广泛的关注。然而,目前基于微纳结构的反射型彩色滤光研究相对较少,且现有报道的反射型滤光片效率较低;此外,受目前现有制备工艺的限制,基于微纳米结构的彩色滤光片幅面小,需借助显微镜观察其颜色图案。为获得具有较高光能利用率的偏振变色滤波器件,并实现其大面积像素化光变色图案的快速制
近年,随着待处理的数据的量级不断增加以及计算机在硬件计算能力上的突破,深度学习技术在此基础上蓬勃发展。图像语义描述是涉及到计算机视觉和自然语言处理的混合领域,其研
汉字以复杂的构形,较原始的笔意,在世界文字之林中独树一帜。汉字的形体一直以来都是文字学研究关注的重点。“点”是本文界定的新概念,与现代汉语中的基础点笔画不同,“点”
光学生物传感器因其响应速率快、灵敏度高、抗电磁干扰能力强的优势,在医疗、食品安全、环境检测等领域发挥着越来越重要的作用。基于SOI平台的无源波导由于尺寸小、集成度高
目标跟踪作为计算机视觉领域中的一个重要研究方向,在安全监控、智能交通、自动导航和人机交互等方面都有着现实的研究意义和广泛的应用前景。目标跟踪是指在背景不断变化的
冰雪的融化和积累过程是寒区水文过程中重要的一环,在全球气候变化背景下,寒区具有显著的水文响应特征。有“世界第三极”和“亚洲水塔”之称的青藏高原作为高原寒区的典型代表,其复杂的地形条件和观测资料的匮乏,限制了人类对该地区独特水文过程的研究。本研究以青藏高原南部的雅鲁藏布江流域为研究区,针对高原寒区水文特点,为分布式水文模型CREST添加冰川和积雪冻融模块,扩大CREST模型的应用范围,使其可以在高原