基于多尺度特征融合的单目深度估计研究

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:ciper618
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从二维图像获取场景中的深度信息对三维场景感知极为重要,深度图包含场景的三维结构信息,被广泛应用于三维重建、机器人视觉以及智能驾驶等诸多计算机视觉任务。传统方法大多采用双目或多目相机通过立体匹配技术来获取场景的深度信息,但是存在计算过程复杂、相机拍摄范围不足以及应用场景有限等问题。随着卷积神经网络的兴起,基于深度学习的单目深度估计受到了越来越多的关注。由于物体遮挡引起深度梯度的剧烈变化以及现有模型特征提取不充分,导致预测出的深度图出现尺度模糊、物体边缘不清晰等现象。此外,复杂的网络模型难以部署到资源受限的设备上。本文从优化特征提取和压缩模型体积角度出发,对上述问题进行深刻研究并提出相应的解决方案,主要工作与创新如下:在单目深度估计领域,特征融合方法通过引入低层的视觉线索能够有效提升网络对物体深度边缘的定位能力,但是简单的特征融合会弱化显著特征并且产生冗余信息。针对该问题,本文首先基于Non-Local和通道注意力设计了三种形式的注意力机制,提升编码网络对不同尺度特征的辨别能力,同时抑制冗余信息对模型造成的不良干扰,然后进行多尺度特征融合,使浅层的局部特征和深层的全局特征进行信息互补。此外,本文在解码网络中设计了像素重组模块(Pixel-Shuffle Block,PSB)和递归优化模块,使网络在预测深度图的过程中学习更加细粒度的深度信息。在NYU Depth V2和KITTI数据集上的实验结果表明,本方法预测深度图的准确性进一步提高,预测的物体轮廓细节更加清晰。本文提出的多尺度特征融合方法虽然提高了模型精度,但由于网络结构复杂以及参数量较大,使其不能很好的部署到资源受限的设备上。针对该问题,首先,本文搭建了一种轻量化的单目深度估计网络,设计了全局纹理模块(Global Context Block,GCB)让网络更加关注图像中的纹理信息,从而提高该网络的基线性能。然后,使用知识蒸馏策略将多尺度特征融合网络所学知识迁移到轻量化网络上,针对网络结构的不同位置进行知识蒸馏,分别提出基于中间层的结构蒸馏和基于输出层的目标蒸馏。其次,引入视觉Transformer(Vision Transformer,ViT)对轻量化网络提取到的最终特征进行全局信息处理,设计一种分类的方法来解决网络预测任务。实验结果表明,最终模型在有效性和实时性等方面都取得了不错效果。
其他文献
城市公园绿地是人们日常亲近自然、休闲娱乐的主要场所,植物景观是城市公园设计的重要内容,是游客游览体验的重要媒介。研究以福州市5个典型城市公园为例,采用样本统计分析与Kruskal-Wallis非参数检验得出不同植物配置模式下的声源感知、总体声景感知和物理声学特征及其差异特征;采用Spearman’s rho相关性分析与逐步线性回归分析探究声景与声源感知、植物景观主观评价、植物群落客观属性、视觉景观
学位
本文利用茶皂素制备了洗发香波、沐浴露、洗洁精等产品,测试了不同茶皂素含量洗涤产品的理化指标并进行了性能评价。结果表明:茶皂素质量分数在0.3~2.0%时,洗涤产品的感官、理化指标均符合国家标准,在高温低温下均具有良好的稳定性;起始泡沫高度均在125~170mm,且ΔH逐渐变小,有良好的发泡力和稳泡能力;随着茶皂素含量的增加,降低了洗涤产品体系的黏度,同时也提高了洗涤产品的去污能力。
期刊
在城市化快速发展的背景下,城市地表覆盖类型以及景观格局的演变导致了一系列环境问题。气候变化与极端天气事件的频繁发生导致城市热岛现象成为最主要的环境问题之一,如何缓解城市热岛效应成为主要的研究内容之一。城市蓝绿空间作为城市生态系统的重要组成部分,在改善城市生态环境与缓解城市热岛效应中发挥着重要作用,其中对热岛效应的缓解称为冷岛效应作用。因此对蓝绿空间的冷岛效应研究是目前缓解城市热岛效应重要方式。本研
学位
长久以来,“十八大”、“十三五”、“十九大”、“十四五”一系列的国家政策均体现了国家对生态文明建设和公民文化素质培养的高度重视。积极响应新时代政策,将文化艺术融入生态公园,打造“以人民为中心”的特色城市公园,提高公民的生态意识与文化自信,为公民提供正确的价值导向和科学引导,是风景园林学科未来的重要议题之一。植物景观是城市公园建设的重要组成部分,植物作为唯一具有生命力的园林元素,兼具美丽、生态与文化
学位
随着全球气候变化和城市化进程的加剧,超大型城市面临的极端暴雨洪涝灾害问题日益严重,威胁城市安全。调查了近年全球范围内典型城市极端暴雨灾害事件特征及其应对不足的经验教训,梳理了典型区域应对洪水灾害的韧性城市建设成果。以北京市为例,在系统分析其历史洪涝灾害特征、洪涝灾害防控现状及存在问题基础上,立足韧性城市建设视角,从规划设计、基础设施、组织体系等方面,探讨超大型城市极端暴雨洪涝应对策略及洪涝灾害防控
期刊
2019年国家成立健康中国行动推进委员会,推行健康中国战略。在此背景下,城市公园作为兼具公共性和服务性的重要户外活动空间,探究城市公园与居民健康的相互关系,对进一步优化城市公园的健康效益,推动“健康中国”理念在城市公园设计中落地有重要意义。本文通过阅读相关理论及文献,确定公园使用者行为作为城市公园景观干预公共健康的途径。以福州市为例,结合SOPARC观察法、问卷调查法、数理统计分析等研究方法,选择
学位
传统聚落作为中华文化的重要载体之一,面临着城镇化快速发展所带来的聚落缩小、聚落风貌消失等切实问题。在21世纪快速发展的浪潮下,至今1700多年的五夫镇也受到了一定的影响。五夫镇位于福建省北部与江西交界的武夷山市,作为上千年历史的“邹鲁渊源”,2010年入选中国第五批历史文化名镇名录,并且是武夷山市申请双世遗的重要非物质文化支撑。聚落内留存大量完整的名胜古迹,是具有闽北特色的山地型传统聚落,其文化遗
学位
在全球气候变化和城市化进程加快的背景下,城市雨洪灾害风险与日俱增,已成为一个重大的全球性问题。绿色基础设施(GI)可以提供可获取且高效的雨洪调节服务功能。城市能够通过合理规划绿色基础设施的位置增强雨洪调节能力,最终达到扩大城市生态弹性的作用。为了减轻城市地表水泛滥的风险,提高城市绿色基础设施的雨洪调蓄功能。以雨洪安全格局、社会雨洪脆弱性、道路雨洪脆弱性、建筑雨洪脆弱性、空间分布格局为指标,构建绿色
学位
金融市场起着社会资源集中再分配的重要作用,在推动社会经济建设进程中贡献巨大。所谓“预则立,不预则废”,股票价格预测的相关研究,能够避免金融市场中的不利因素,从而使金融市场向着良好健康的方向发展。目前相关从业人员和研究学者已经开发出了很多方法,而且主流的方法是基于深度神经网络。然而,由于金融市场的复杂性和多变性,现阶段单一深度神经网络模型还无法覆盖金融市场影响因素的各个方面,模型在学习其中存在的规律
学位
目的:探讨分析首次使用动静脉内瘘(AVF)行血液透析(HD)患者AVF自我维护管理现状及相关影响因素,从根本上提供干预措施支持,改善患者生活质量。方法:选取2019年6月至2021年6月期间73例首次使用AVF进行HD的患者为纳入对象,采用AVF自我维护管理行为量表与-般资料调查表统计全部患者对应因素下自我维护管理行为评分情况,采取单因素和多因素logistic回归分析首次使用AVF行HD患者AV
期刊