迈向精确而鲁棒的深度图补全

来源 :浙江大学 | 被引量 : 0次 | 上传用户:ken331
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度图补全(Depth Completion)指从一张稀疏深度图与相应的彩色图像中恢复出致密彩色图像的任务。随着低成本激光雷达在无人驾驶领域的广泛应用,从稀疏的激光雷达点云中恢复出致密的环境深度信息正引起越来越多研究者的关注。而大型深度图数据集的发布使得基于深度学习的方案大放光彩。因此,深度图补全网络模型的结构设计是当前此问题的关键所在。为更彻底的融合此两种模态数据,本文基于“从彩色图像和稀疏深度图中分别预测一张深度图”的思想,提出用一个简单的两分支网络精准地补全深度图。具体来说,一个分支输入彩色图和稀疏深度图,另一分支输入稀疏深度图和第一分支预测的深度图。由两分支预测的深度图具有互补性,因此被自适应地加权融合。此外,还提出了几何卷积层,仅仅简单地将三维坐标嵌入多尺度特征中即能在KITTI数据集上获得约10mm RMSE的性能提升。最后通过扩张的空间传播网络优化骨架网络预测出的深度图,并对其进行了加速实现。在此基础上,本文提出一种稀疏数据增强策略,即在训练时将稀疏深度图降采样至不同的稀疏程度输入网络,旨在使模型适应部署阶段可能因传感器或场景变化而产生的稀疏模式变化。通过分析,我们发现并非所有的模型都能受益于此数据增强策略,而所提出的两分支结构即在受益之列。尽管不包含任何稀疏不变算,两分支骨架网络模型在以数据增强策略训练后,亦具有稀疏不变性。扩展的消融实验和可视化结果表明,“稀疏——粗糙——精细”的两阶段设计是使模型鲁棒的关键所在。截止2020.11.01,本文提出的方法在无人驾驶公开数据集KITTI上排行第一,且作者就此学位论文答辩之时,在KITTI上所有的开源方法中排名第一。此外,所提出的稀疏数据增强策略,使得模型能不仅精准、而且鲁棒地补全深度图。
其他文献
信道编译码技术是提高通信系统可靠性的关键技术,极化码作为5G(The 5th generation mobile networks)标准中控制信道的编码方案,其纠错能力影响着通信传输的质量。在实际应用中,利用信道编译码来提高系统的纠错性能和抗干扰性能尤为重要。迭代译码技术是一种可以提高译码纠错能力的关键技术。为了进一步提高通信传输的可靠性,本文对极化码迭代译码相关技术展开了研究。首先,本文介绍了极
学位
植被作为整个生态系统中的重要一环,对于地球环境治理、气候变化和人类社会活动等方面影响深远。对于植被组件(如主干或支干)的电磁散射研究,常用有限长圆柱体进行建模,并在物理上提供关于柱体散射特性的解析解。然而,当电磁环境或植被参数分布愈发复杂时,传统物理方案如基于虚拟分割的T矩阵方法面临计算效率问题,此时引入一种更加高效的散射模型便显得愈发重要。深度学习方法借助神经网络的表达能力在学习非线性关系方面表
学位
测试芯片是集成电路制造工艺开发阶段用于提取工艺参数、监测工艺偏差、评估器件性能的重要手段。随着集成电路工艺发展,业界开发出一种片上直连测试技术,保持产品芯片器件生成阶段的掩模制造过程不变,重新设计并制造用于器件互联的掩模,将关键器件直接连接到芯片上的焊盘,再通过测试机对焊盘的探测实现在真实物理环境下的器件电性测试。随着先进工艺下影响器件性能的因素与流片成本剧增,用户希望增加此类芯片在单次流片中可监
学位
目的 探讨四川省凉山彝族自治州喜德县中学生的心理健康状况及其影响因素,为当地中学生的心理健康干预提供参考。方法 采用横断面研究设计,于2021年9月16日,在四川省凉山彝族自治州喜德县,使用简单随机抽样方法,抽取1所初中和1所高中,在两所学校的各年级中随机选取两个班级的学生为调查对象,共288名。采用患者健康问卷抑郁量表(PHQ-9)、广泛性焦虑障碍量表(GAD-7)、创伤后应激障碍检查量表(PC
期刊
目的 分析新型冠状病毒肺炎(COVID-19)疫情常态化防控下中学生的心理健康状况及其影响因素,为对其进行心理干预及管理提供参考。方法 于2021年3月7日-21日,采用分层随机抽样方法,在山东省临沂市3区9县抽取17所学校的19 352名中学生为研究对象。采用自编调查表收集中学生基本资料,使用症状自评量表(SCL-90)评定其心理健康状况。采用独立样本t检验、单因素方差分析、逐步回归分析探索中学
期刊
近年来,电力电子技术发展迅速,电力电子设备被广泛应用在工业和商业环境中,但这对电力系统引入了大量的谐波,影响其可靠的运行。通常情况下,谐波检测是由专用的谐波分析仪定点定时进行的,但随着能源物联网的提出和发展,智能电表作为其中的一个重要传感节点,实现谐波测量功能非常有意义,其提供的实时谐波信息可以协助进行谐波抑制和管理策略,提高电能质量。本文根据国网智能电表谐波测量的标准,进行了谐波测量算法研究及其
学位
新的时代背景下,国家对于职业教育愈加重视。高职院校育人工作的落实,既要关注学生校内知识技能的掌握,又要培养学生自主学习意识,为学生未来工作适应职业晋升奠定良好基础。“互联网+”背景下高职美术教学要积极探索混合式教学模式的有效优化,顺应时代潮流,推进教学方式的多元化,让学生学习体验积极成长,高职美术教学工作创新性开展。“互联网+”背景下高职美术混合式教学的优化有良好的学生基础、设备基础以及信息传播优
期刊
为提高飞机起落架载荷实测精度,以支柱式起落架结构为研究对象,探讨处理其载荷标定数据的工程方法。首先,对实际受载情况和单向加载工况标定数据的分析,挖掘出三向载荷、缓冲支柱压缩行程与应变码值间的数学关系,将预测的数学关系代入到多向工况的标定数据中,验证了它们的准确性;其次,根据两种标定数据回归方法,提出了对应使用的支柱式起落架载荷-应变标定方程的数学模型;最后,将两种标定方程代回到标定数据中,计算起落
期刊
电动汽车的兴起使得动力电池得到飞速的发展,其中锂离子电池作为主要的动力电池,它的相关技术成为研究的重点。锂离子电池荷电状态(State of Charge,SOC)和健康状态(State of Health,SOH)是电池管理系统中的核心参数。对锂离子电池荷电状态和健康状态的精确估计可以使电池安全高效的使用和工作,避免电池过充过放,提高电池寿命。本文以锂离子电池为研究对象,深入研究锂离子电池的SO
学位
目前的青蟹表型数据测量和蜕壳监测都是通过人工采集的方式,不仅其过程效率低,偶然误差大,而且对工作人员有较高要求,操作也容易产生安全和经济风险。随着育种优选技术的发展,青蟹的测量和检测也有了更高精度、更强鲁棒性的方法需求。近年来随着人工智能信息技术的不断进步,深度学习的方法在渔业的研究和生产中表现出了优异的性能。所以本文以青蟹为研究对象,采用深度学习的方法实现青蟹高精度的表型数据测量模型和蜕壳检测模
学位