基于域适应的图像深度信息估计方法研究

来源 :上海工程技术大学 | 被引量 : 0次 | 上传用户:yhmlivefor48
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
场景深度信息恢复是计算机视觉领域的重要研究课题之一。普通相机拍摄的二维图像由于丢失了深度信息,无法全面的感知场景的三维结构,这也是目前很多基于二维图像的计算机视觉任务的难点之一。如果能够准确的恢复出场景的深度信息,将能够辅助解决很多现有的计算机视觉任务。例如:即时定位与地图构建技术(Simultaneous Localization and Mapping,SLAM)、机器人导航技术、目标检测和语义分割等。通过传感器获取的深度图比较稀疏,且采集范围有限,从而难以被广泛应用。因此,从二维图像中恢复出场景的深度信息具有重要的研究意义。本文主要研究单目图像的深度估计问题。早期的单目深度估计技术依赖理想的环境假设,深度图的质量较差。近几年的工作都是使用深度学习的方法实现从二维图像获取深度信息,并且取得了非常好的效果。但在深度学习方法中,监督式学习的方法受限于深度真值的获取上;而无监督式学习的方法由于训练过程未使用深度真值,导致深度信息存在尺度模糊问题。针对上述问题,本文提出一种域适应深度估计的算法,在不使用真实场景深度真值的前提下进行监督式学习,将其它视觉任务中的处理方法结合到本文的框架中,获得了质量更好的深度图。本文的主要创新总结如下:1.提出了一种联合感知损失的域适应深度估计框架,通过生成对抗网络将输入图像转换成和真实场景图像相似的目标图像。使用预训练好的网络提取输入图像和目标图像的高级特征,在特征空间上进行损失度量保证目标图像的高层语义特征不发生改变。结合感知损失和对抗损失对转换网络约束转换网络的训练,实验结果表明,该方法在单目深度估计任务中,取得了良好的效果。2.针对域适应深度估计中固有的域漂移(Domain shift)问题,提出了一种使用结构感知损失进行联合训练的解决方法。在域适应深度估计过程中,转换后的目标图像,在几何结构上容易发生变化,这会导致紧随其后的深度估计网络训练出错。因此,提出一种新的结构损失函数,在特征层上使用结构相似性度量函数约束转换网络,保证在转换前后特征的几何结构保持一致。此外,为了得到边界连续的深度图,使用空间梯度损失对深度估计网络进行反向调节。3.在联合感知损失和域适应深度估计工作的基础上融入注意力机制对深度估计进行优化。在深度估计网络中融入注意力机制,解决深度估计过程中背景信息的干扰问题,使深度显著特征发挥更大的作用。此外,使用空洞卷积解决由于网络太深带来的特征丢失严重的问题。最终的实验结果不仅整体提升了深度精度,还获得了细节更好的深度图。
其他文献
国际商事仲裁制度中,仲裁制度分为机构仲裁和临时仲裁两种,在机构仲裁蓬勃发展的同时,临时仲裁也是国际商事活动中较受欢迎的争议解决方式。临时仲裁具有高效灵活、便捷又保密的优势,特别是在国际商事领域。临时仲裁制度是仲裁制度的初始形态,机构仲裁是在临时仲裁基础之上产生的。但是因为我国《仲裁法》关于“选定仲裁委员会”的规定,临时仲裁在我国发展举步维艰。随着我国经济的持续稳定增长和自贸区建设的推进,争议解决方
两相流动现象在自然界以及工业生产过程中广泛存在。目前,在动力、化工、核能、制冷、石油和冶金等行业的许多生产设备中都涉及到多相流流动工况。两相流的流动介质之间的分
灰色评估广泛应用于效绩考察、方案优选等。在专家评估问题中,专家评分矩阵是评估的主要依据和出发点。而专家评分矩阵往往带有专家的主观倾向,这种主观倾向对评估结果造成的
能源是现代工业的基础。石油和天然气作为一种重要的能源资源和战略资源,深刻影响着各国经济的发展。钢铁工业作为国民经济最重要的基础行业之一,属于高能耗工业。油气资源是
扣件式钢管高大模板支撑体系是我国应用最普遍的一种模板支撑形式。但由于此类结构设计计算和实际搭设过程中存在着许多不确定性因素,导致坍塌事故时而发生。针对实际建筑工程中模板支撑体系存在的问题,本文采用理论研究和风险分析的方法,基于建筑结构的整个施工过程,对模板支撑体系的可靠性进行研究。在此基础上,针对各种风险因素,提出有效的改进措施,尽可能减少坍塌事故的发生。主要研究成果如下:静力试验中搭设9组模板支
本文是在M(X)/M/c→(M)/M/n/K基础上改进,首次对I级服务系统的容量限制,Ⅱ级容量无限,即为EK/M/n/N→M(X)/M/c模型,对于该模型的研究是从四个方面展开的。首先,研究系统平稳的充要条件及
督促程序于1877年由德国民事诉讼法首先创设,其立法目的是对债权债务关系明确的案件,省去法庭实质性审理阶段,使债权人迅速获得具有强制执行效力的法律文书。督促程序在德国
属性基加密Attribute-based Encryption,(ABE)作为一种加密数据的有效手段,可以实现用户对密文数据的细粒度访问控制,其通过访问策略来控制用户的解密操作。同时,基于格构造的密码方案具有抵抗量子计算攻击、运行高效和易于实现等优点。因此,构造基于格的ABE方案是密码学中的一个研究热点。但是,大多数基于格构造的ABE方案无法支持属性撤销,并且其私钥生成中心计算开销过大。本文对这两
本论文考察了不同醛基含量对双醛玉米淀粉理化性质的影响,首次使用双醛淀粉作为脂肪酶固定化的载体,并对固定化前脂肪酶预处理的效果进行了探索;对双醛淀粉固定化脂肪酶在叔丁
克雷伯氏肺炎杆菌(Klebsiella pneumoniae)是一种用于生产1,3-丙二醇的优良菌株。菌株代谢甘油生成1,3-丙二醇的相关酶由dha操纵子编码,二羟基丙酮激酶(DHAK)是dha操纵子编码