基于卷积神经网络的端对端立体视觉场景匹配算法研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:samuraitruong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
立体视觉是计算机视觉领域的研究热点之一,其原理是利用两个不同视点下获取的关于同一场景的立体图像来恢复场景的三维几何信息,在视觉导航、自动驾驶和三维重建等领域具有广泛应用。立体匹配是计算机立体视觉系统中最关键也是最困难的环节,其目的是寻找立体图像中像素点之间的匹配关系,生成相应的视差图。近年来,以卷积神经网络为代表的深度学习技术颠覆了计算机视觉的众多领域,基于此的立体匹配网络研究成为领域内的研究热点。针对立体匹配网络中存在图像病态区域匹配效果欠佳、模型参数量过大的问题,本文提出基于多阶特征融合与循环代价聚合的端对端立体匹配网络MFRANet。主要工作与创新点如下:(1)为增强特征的表征与判别能力,提高网络对于图像病态区域的匹配精度,本文提出一种基于多阶特征融合的特征提取网络。该网络遵循分阶段、逐步式的特征融合策略,对多层次、多尺度特征进行融合,将图像的低层细节信息和高层语义信息同时融入特征之中。实验结果表明,本文提出的多阶特征融合方法具有优于其它特征融合方法的效果,可以有效地提高网络的匹配准确度。(2)针对立体匹配网络参数量与匹配精度之间的矛盾,本文提出一种嵌入深监督机制的3D循环代价聚合网络。一方面,为有效解决网络参数量过大的问题,将代价聚合方式由常见的级联式改进为循环式,极大地降低了网络的参数量。另一方面,为充分利用多尺度代价信息,将代价聚合子网络设计为沙漏型结构,实现跨尺度代价聚合,从而改善代价聚合的效果。此外,将渐进式深监督机制整合到循环代价聚合的过程中,以提高网络学习过程的直接性和透明性。实验结果验证了各个部分设计的有效性与合理性。(3)为验证本文提出的端对端立体匹配网络MFRANet的匹配性能,在立体匹配主流数据集Scene Flow、KITTI 2012和KITTI 2015上对其进行评测,并与其它先进的立体匹配网络进行对比,评测结果表明MFRANet具有领域前沿的匹配性能。其中,对于Scene Flow数据集,EPE误差值降低至0.92 pixels;对于KITTI 2012数据集,>3px误匹配率降低至1.88%;对于KITTI 2015数据集,>3px误匹配率降低至2.21%。
其他文献
肝脂肪变性(Hepatic steatosis)是肝脏细胞中脂肪过多堆积导致的疾病。它是非酒精性脂肪肝疾病(Non-alcoholic fatty liver disease,NAFLD)的关键症状。虽然初期NAFLD属于良性病变,但它可能发展成非酒精性脂肪肝炎、肝纤维化、肝硬化甚至肝癌,因此,早期发现肝脂肪变性并及时诊治至关重要。医学超声成像技术因其非侵入式、实时简便等优势成为NAFLD的常规检
学位
作为第三代半导体材料,氮化镓(GaN)以其高电子迁移率、高热导率等优势,更能满足通信设备、雷达系统等日益增长的器件大功率输出等特性需求。因此,GaN器件被广泛应用到功率放大器、振荡器、乘法器等大信号电路中。而晶体管模型作为电路设计中最基础、最重要的器件,其模型的准确性对于电路系统的性能至关重要。本文首先介绍了GaN的材料特性、器件及小信号、大信号模型发展的历史,总结了不同GaN高电子迁移率晶体管(
学位
射频功率放大器是无线通信系统中的关键模块,也是最耗能的单元。近年来,多种提升功放效率的技术相继被提出,其中基于谐波调谐技术设计的功放由于具有高效率和高输出功率的特性,成为了功放领域的研究热点。此外,随着通信技术的飞速发展,频谱资源日益紧张,信号的调制方式也变得更加复杂。一方面,为了满足射频前端在不连续频带工作的需求,双频功放的研究越来越受到关注,另一方面,复杂的调制方式也要求功放能够放大高峰均比的
学位
随着集成电路设计复杂度增加,集成电路产品开发者往往大量引入第三方知识产权(IP,Intellectual Property)进行辅助设计。由于存在以硬件木马为代表的安全威胁,第三方IP核的可信性问题亟需解决。受限于覆盖率不足等缺陷,现有的功能验证技术对高触发隐蔽性的硬件木马检测效率较低。因此,针对高触发隐蔽性硬件木马,本论文在深入分析硬件木马信号活动性的基础上,提出了一种结合功能性分析和结构性分析
学位
土壤水动力学参数是土壤水分、溶质运移模拟研究中的重要参数,构建用于预测土壤水动力学参数的土壤传递函数是土壤水动力学研究中的重要内容之一。天津市位于华北平原与环渤海经济区核心区域,高强度的人为活动与生产生活使得区域水资源紧缺问题日趋严重,土壤作为水资源的重要储存场所因而具有重要的开发利用价值。但目前针对该地区土壤水力性质的实测数据及相关研究较少,缺乏对土壤水力性质的系统性研究。为此,本文首先基于涵盖
学位
脑肿瘤是最致命的癌症之一,脑肿瘤的早期诊断对手术治疗具有重要意义。核磁共振成像(Magnetic Resonance Imaging,MRI)技术可以很好地呈现大脑组织的细节信息,被广泛用于脑肿瘤诊断。手动分割脑肿瘤耗时耗力,因此高效、全自动的脑肿瘤分割方法成为研究重点。针对现有脑肿瘤分割方法参数量大、分割精度不高的问题,本文提出一种基于可学习组卷积、深度监督和跳过连接的轻量级脑肿瘤分割网络(Di
学位
目的 探究分析大剂量维生素C洗胃对误服高锰酸钾中毒患儿的抢救效果及临床价值。方法 抽取2020年7月—2022年7月于江苏省苏州市昆山市第一人民医院儿科接受诊断治疗的86例误服高锰酸钾中毒的患儿作为研究对象,按照随机数表法分为两组,每组43例。其中,对照组采取常规治疗结合温水洗胃,观察组在常规治疗的基础上结合大剂量维生素C洗胃。比较两组患儿临床疗效以及中毒症状消失时间、住院时间、并发症发生情况。结
期刊
天津市作为我国北方最大的沿海开放城市,工业发达,空气质量问题一直备受关注。近年来,大部分研究主要侧重于天津市大气污染物的变化特征、时空分布和来源解析等,对于大气单颗粒理化特性的研究少有涉及,因此尚不能很好地从微观尺度阐明沿海城市地区大气污染过程的形成机制。因此,本研究选取天津城市地区代表性研究站点,利用透射电镜和扫描电镜等单颗粒分析技术,研究对比了天津城市地区四季典型污染过程中大气单颗粒的理化特性
学位
MOS晶体管进入深亚微米后,由热载流子效应导致的器件可靠性问题愈加严重。随着MOS晶体管在射频电路中的广泛应用,射频条件下的热载流子效应及其退化机制成为国内外研究的热点。由于MOS晶体管受高横向电场和高射频信号的驱动产生的热载流子效应对器件造成了损伤,导致器件的低频噪声增大,而低频噪声会通过上变频导致相位噪声的增大,从而影响射频电路的性能。因此,研究器件的低频噪声受热载流子应力(直流应力和射频应力
学位
血瘀证广泛存在于肾脏病中,血行失度、血脉不利、久病入络、离经之血、恶血衃血均为瘀血;究其病因,或因禀赋有异,或因饮食起居失常,或因年老体衰、久病失治等;病机变化,可归于因虚致瘀和因实致瘀两端。临床治疗以“活血化瘀”为主要治则,随症进行辨证治疗,化瘀与养气血、调升降、行水、清解合用,在肾脏病治疗中取得了很好的临床疗效。
期刊