基于深度学习的单目图像深度估计研究

来源 :东南大学 | 被引量 : 0次 | 上传用户:catche
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度信息是智能系统实现场景理解的基础,单目图像深度估计作为一个比较基础的视觉任务,可以为许多高级任务提供深度信息,在自动驾驶、增强现实、虚拟现实等任务中有着巨大的应用前景,可以说是一个相当重要的研究课题。虽然现在已经出现了一些可以用于获取深度信息的设备,比如深度相机、激光雷达,但是在室外场景下它们不能获得令人满意的深度值。相比于双目和多目深度估计方法,单目深度估计方法获取数据简单、成本低廉,可以得到一张全分辨率的深度图,为深度信息的获取提供了一条全新的研究思路。正是因为单目图像深度估计方法具有重要的研究价值,本文基于深度学习方法对室外场景下的单目图像深度估计进行了研究,主要研究内容如下:1、针对室外场景下的单目深度估计任务,在第三章中提出了一种基于编解码结构和分阶段优化策略设计的单目深度估计算法。这个模型由两部分组成,第一部分选择使用当前最先进的单目深度估计体系中的编解码结构,第二部分使用CSPN作为后处理模块,可以对第一部分产生的不够细粒度的深度图进行优化。虽然使用分阶段策略,但是最终的模型整体上还是一个端到端结构,训练与测试过程并不复杂。在面向室外场景的公开数据集KITTI上对模型进行训练与测试,实验结果证明该算法针对室外场景可以产生比较好的深度预测效果。2、第三章中提出的模型产生的深度图在物体的轮廓细节上比较模糊,为了解决这一问题,第四章中所做的工作在其基础上新增加了一个特征对齐模块,提出一种基于特征对齐操作和分阶段优化策略的单目深度估计算法。不同于一般的单目深度估计算法,该模型使用从视频中抽取的连续帧序列作为输入,特征对齐模块先后在多个尺度上对邻近帧与参考帧的特征图进行对齐,从而更好地利用图像中包含的局部信息。通过将邻近帧与参考帧的特征图进行融合,丰富了参考帧特征图中包含的信息,以便预测出更精确的深度值。在KITTI odemetry数据集上对这一模型进行训练与测试,实验结果显示加入对齐模块后的模型在评价指标和最终输出的深度图上都要优于第三章中提出的模型,这说明加入特征对齐操作确实显著提升了算法的深度预测能力。3、由于第四章中提出的模型存在网络设计复杂导致的训练参数量大、训练与测试耗时长等一系列不足,使用空间可分离卷积替换模型中的标准卷积,对其进行轻量化改进,。另外,由于轻量化后的模型出现了精度降低的问题,为了解决这一问题,使用图像集合损失函数对模型进行训练,这种损失函数充分利用数据增强后的图片与原图片应该预测出相同深度值这一关系。最终在KITTI odemetry数据集上对轻量化后的模型进行训练与测试,实验结果表明该轻量化模型可以在精度与效率之间取得比较好的折衷,虽然最终得到的深度图在细节上不如第四章中提出的模型,但是考虑到轻量化措施大大减少了训练参数量、加快了模型的训练与测试速度,这一研究还是具有一定价值的。
其他文献
随着全球经济的高度融合,各行各业呈现出繁荣的景象。银行业,作为金融机构之一,其与一国经济发展息息相关,并对人们生活影响巨大。因此,在大众中构建良好的企业形象显得尤为重要。而致股东信函作为企业年报的开篇之作,能够快速有效地传达企业思想,构建企业形象。本研究搜集中美银行业英文致股东信函各30篇。为保证研究可信度,所选企业均位列世界财富500强。通过对致股东信函中态度资源的标注与统计,研究发现中国工商银
随着中国经济的不断发展,我国的消费水平也在不断提高,生活垃圾的产量也显著增加,已逐渐成为阻碍我国各个城市发展的重要因素。在中国共产党召开的第十九次全国人民代表大会上习近平总书记强调了“金山银山不如绿水青山”的观点,同时也明确的提出打好“防范风险、精准脱贫、污染防治”三个攻坚战,历届人大会议中首次将保护环境、建设生态文明提到了 GDP前面。显然,垃圾的分类回收及处理已成为我国迫切需要解决的环境保护问
公共事业单位汇集了我国各行各业的精英,是我国综合国力不断提升的重要领域,一直以来都作为国家实施科教兴国战略的重要阵地。和公务员一样,事业单位工作人员也属于国家公职人员。根据《中共中央国务院关于分类推进事业单位改革指导意见》所设立的改革目标指出:到2020年,我国要建立起功能明确、治理完善、运行高效、监管有力的管理体制和运行机制,形成基本服务优先、供给水平适度、布局结构合理、服务公平公正的具有中国特
“公平、立德、改革,方能人生出彩”的教育观中,公平原则作为教育的基础原则,通过公开公正的教育教学模式使义务教育的普惠范围得到进一步拓宽,城乡的义务教育差距也能够得到缩减,这也是近几年党与政府提高农村地区义务教育重视程度的重要原因。近几年大连市义务教育事业发展非常迅速,城乡教育公平重视程度提高,教学资源也得到了充分分配,在义务教育中信息化教学资源的利用率不断提高,大连市政府在2018年也在《大连市义
现金流是企业赖以生存和稳定经营的基础,正常的现金流运作可以使公司稳健经营,反之,公司就会出现危机,严重的话公司将会倒闭。现金流对于保险企业同样重要,它是其价值创造的基础。与其他非保险类企业相比,保险公司的产品经营以及形成的资产和负债都具有特殊性,从而导致保险公司的现金流具有和其他金融公司不同的性质。保险公司的金融特性决定了保险公司的业务就是现金流的运作业务,以公司整体价值提高为导向的现金流管理将给
裂缝是山西省高速公路最典型的路面病害,并且裂缝形态、类型多种多样。本文通过对路面裂缝的成因和形态进行深入分析,并形成一种具有较强针对性和可操作性的裂缝分类方法,有助于养护部门对路面裂缝进行有针对性的的养护处治,提升裂缝处治效果,节约养护资金。首先,本文对山西重要高速公路路面裂缝形态进行大规模调研,充分掌握其形貌特点和分布特征。调研结果表明,山西高速公路路面裂缝以贯穿横缝、轮迹带范围内的纵缝为主,横
伴随着互联网科技的高速发展,人类正逐步迈进一个新的时代,信息化技术已经渗透到我们生活的各个方面。教育一直是我国高度关注的热点问题,结合现代社会发展新需求,利用互联网高效便捷的特点,教育行业与互联网科技的完美结合正在我们的学习和生活中发挥着不可替代的作用,学习方式由传统的师生需要共同处于同一间教室中以直接接触的交流方式转化成为横跨时间、空间、地点的新型线上学习模式。大众对这种新型学习模式接受程度极高
体育行业协会行政性垄断是我国体育行业发展以来长期存在的问题,严重的阻碍了我国体育事业的发展和进步。归根结底,主要是由于我国的《反垄断法》对体育行业协会的行政性垄断规制欠缺,反垄断执法力度不足等一系列原因造成。首先,本文认为,体育行业协会有其自身的特殊性,虽然其实施的垄断行为更具隐蔽性、稳定性,但是只要其实施了反垄断法中禁止的行政性垄断行为,就应纳入反垄断法调整的范围,并接受反垄断法的审查;其次,在
越来越多的文献关注高等教育在区域经济社会发展中的作用,人们普遍认为,在当今知识经济时代下,高等教育在区域社会发展与经济增长中起着至关重要的作用。中国经济增长正在摒弃传统粗放型发展模式,面临着创新驱动、自主发展的全新发展理念,除了传统的劳动力、资本等要素之外,知识越来越被视为区域经济增长的重要刺激因素,并且往往是区域经济增长中的战略重点。基于此时代背景,创新驱动、人才强国等发展战略赋予了高等教育新的
苏州的盘门是我国现存仅有的“水陆并存”城门,具有较高的历史、文化价值。本课题立足于艺术学、心理学、经济学,从历史文化、消费者心理、设计的合理性等多个角度出发,追溯盘门作为建筑物的形成轨迹、重构“水陆萦回”的城门文化。通过问卷调查,对苏州古城墙和盘门景区的游客进行抽样调查,掌握了相关数据,论证了盘门文创产品设计的机会点;以盘门“水陆萦回”的构造特色为导向、从约翰·霍金斯的创意经济理论出发,对盘门的特