基于深度学习的单目图像深度估计方法研究

来源 :武汉大学 | 被引量 : 1次 | 上传用户:minlu123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度信息对理解场景中的三维几何关系具有十分重要的作用,准确有效的深度信息可以提升许多计算机视觉任务的精度。现今深度信息大都是通过深度传感器来获取的,但是由于这些方法使用场景受限、硬件成本较高,限制了其大范围的推广使用。因此,不借助深度传感器,直接从图像中获取深度信息的研究受到越来越广泛的关注。相机成像时是将三维空间投影到像平面上,这必然会造成深度信息的丢失。典型的深度获取方法大都是通过多幅图像立体匹配来实现的,而从单幅图像中直接获取深度信息长期以来被视为是病态问题,是很难实现的。近些年来,随着计算机计算性能的不断提升和深度学习的持续发展,卷积神经网络(CNN)超强的特征提取能力为单目图像深度估计问题提供了新的思路,许多方法都取得了不错的结果。但是这些方法预测得到的深度图中依然存在物体边缘轮廓不清晰、深度变化不平滑等问题。并且这些方法大都是采用复杂的图论推断来对最终得到的深度图进行优化。因此本文针对上述问题,进行了如下研究:1、为了能更好地提取输入图像中的多尺度特征,本文提出了基于密集连接网络(Dense Net)和扩张空间金子塔池化(ASPP)结构相结合的特征提取网络结构,Densenet通过密集连接单元的引入,解决了深层网络容易出现梯度消失、爆炸和模型退化的问题。ASPP通过扩张卷积的引入来实现图像中多尺度特征的提取。将两者一同应用到图像编码器-解码器结构中,从而使整个网络能够实现端对端的训练。2、针对深度图中物体边缘轮廓不清晰、深度变化不平滑的问题,本文将单目图像深度估计问题转化为多个连续的二分类问题。相比于直接回归和多分类的方法,采用多个二分类的方法能有效利用场景中深度信息从近到远顺序分布的规律。因此,可以使图像中深度相近的像素点受噪声干扰较小,预测的到的深度不跳变,最终实现平滑深度图的效果。3、针对条件随机场(CRF)等方法计算复杂且很难与卷积神经网络(CNN)相结合的问题,本文引入了虚拟法向量来优化最终得到的深度图。因为虚拟法向量是通过三维点云中不共线的三点构成的虚拟平面计算得到的,所以它在一定程度上可以反映场景中的空间几何关系。因此通过最小化真实深度图和预测深度图对应的虚拟法向量之差,便可以实现化优化深度图的目的。通过在NYU Depth V2、Make3D、KITTI这三个典型深度数据集上的训练、验证和测试,实验结果表明:本研究提出的单目图像深度估计方法得到深度图边缘清晰、层次分明,且在室内场景和室外场景中均能适用,具有较强的泛化性,可以满足多种实际场景的需求。
其他文献
气候变暖加剧成为目前全球面临的重大环境问题之一。气候变暖引起各纬度间温湿组合状况发生改变,从而使得地表植被组成产生变化。泥炭地作为环境响应的灵敏指示剂,蕴含着极为
锌作为人体必需的微量元素,它参与碳水化合物、脂肪和蛋白质的代谢调节,对维持人体正常生理功能具有至关重要的作用。锌缺乏会导致生长受损、免疫系统缺陷、神经行为错乱等多
伴随着水声通信、能源、控制和导航技术的发展,自主式水下航行器(Autonomous Underwater Vehicle,AUV)广泛应用于海上预警、水下搜索、海洋资源勘探、海底地形地貌调查与水下
开发海上丰富风能资源的研究,已成为当今热点。随着海上风电装机规模的不断扩大,海上风电的并入降低系统等效惯量,进而影响电网频率的稳定,给海上风电调频控制带来一定困难。双馈风电机组是海上风电场中的主流机型,不具有传统同步发电机的对电网频率的支撑能力。同时,低效的调频方法将会造成惯量和调频能力的进一步下降。因此,本文以提高海上风电系统稳定性、降低负载干扰为研究目标,结合虚拟惯量控制对海上风电机组的调频技
近年来,我国煤炭资源大规模开采的重心已由东部地区转移到了中西部地区,且这一趋势逐年在加强。其中,新疆、蒙陕等地区将成为我国今后很长一段时期的煤炭生产密集区。该区域内煤炭赋存普遍存在层数多、单层厚度大、节理裂隙不发育且硬度较高等特点。针对厚煤层开采主要包括大采高一次采全高以及放顶煤开采技术。由于煤层厚度大,节理裂隙不发育等特点,顶煤冒放困难,回采率低,严重制约了资源高效开发利用,对资源造成了极为严重
一氧化氮作为一种信使分子,广泛存在于骨骼肌细胞中。它由一氧化氮合成酶催化生成,参与机体的多种代谢途径。一氧化氮及其介导的蛋白质亚硝基化能调节多种代谢途径,比如钙离
绩效考核是企业人力资源管理的一项重要环节和内容,不仅能够为人力资源管理提供科学、正确的决策依据,对企业的经营发展和战略目标的实现也起着重要的作用。纵观我国中小监理
随着网络通信技术迅速发展,提高通信质量的同时,集成了多种应用的移动终端设备也丰富了用户的业余生活。但是,在部分特殊应用场景中,通信基础设施并不完善或遭到毁坏,例如外太空、受灾现场、野外和水下等,无法直接建立移动设备之间的端到端链路。为了满足这些场景的通信需求,需要采用一种支持间断性数据转发的通信方式,即机会转发方式。机会转发中节点频繁移动,节点之间不能一直保持端到端路径,这需要借助其他节点进行消息
缓存算法是影响缓存服务器缓存性能的关键因素。传统的缓存算法通常以视频文件的流行度衡量一个文件的价值,优先缓存最有价值的视频文件。近年来,随着终端设备的多样化,一个视频通常需要提供不同清晰度版本以匹配不同终端用户的需求,而这些视频版本能够通过视频编码技术转换,从而给缓存进一步优化设计提供了机会;例如,分层视频编码SVC技术已经被用于设计缓存,通过缓存不同清晰度视频版本中最流行的视频层来提升缓存性能。
我国石油、石化行业发展迅速,各行各业对于油品的需求都十分的庞大。管道作为石油长途运输最可靠、最快捷、最方便的方式之一,在我国得到了很多的应用,目前油气管网遍布全国,