基于卷积神经网络的端到端双目立体匹配算法优化研究

来源 :内蒙古大学 | 被引量 : 0次 | 上传用户:birdflyloveu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
双目立体视觉的核心任务是计算双目图像对应匹配点之间的像素视差进而获得深度信息,具有配置简单、精度高的优点,因此在自动驾驶、虚拟现实和智能机器人等领域有着广阔的应用前景。目前基于卷积神经网络的端到端双目立体匹配算法成为了双目立体视觉研究的热点,但是大多算法难以做到精度和速度上的权衡,限制了算法的应用,特别是阻碍了在精度和速度要求较高场景的应用,针对这个问题,本文对基于卷积神经网络的端到端双目立体匹配算法的准确性和实时性两个方面进行优化研究。针对有高精度需求的场景,提出了一种密集特征融合的端到端立体匹配网络。首先利用多个残差模块构建特征金字塔网络,实现在参数较少的同时充分捕获多尺度上下文信息。其次,设计密集融合模块扩大感受野,并将不同尺度的信息有效地融合起来,获得稠密特征图,减少特征稀疏给复杂区域带来的误匹配率。在此基础上,构造混合注意力模块增强网络对有用信息的处理能力。性能评估结果表明,该立体匹配网络在KITTI 2015数据集上的误匹配率为2.23%,运行时间为0.22s,与高精度算法PSMNet相比,误匹配率更低且运行时间减少46%,有效解决高精度算法运行时间长的问题。针对有高实时性需求的场景,提出了一种渐进细化的端到端实时立体匹配网络。首先设计轻量的特征金字塔网络提取并融合上下文信息,生成三种尺度的特征输出,接着分别经过混合注意力模块增强空间和通道上的信息交互,提高网络的泛化能力,最后以渐进细化的方式输出三个阶段视差图,进一步减少参数量。消融实验结果表明,该立体匹配网络在KITTI 2015数据集上的误匹配率为4.08%,运行时间为0.02s,与高实时算法Any Net相比,误匹配率减少2.43%,运行时间仅增加0.3ms,有效解决高实时算法精度差的问题。针对在精度和速度两方面都有要求的场景,提出了一种双通道特征融合的端到端立体匹配网络。首先利用双通道特征提取网络充分提取浅层空间信息和深层语义信息,通过快速下采样策略保持轻量性。接着进行多尺度特征融合,得到包含丰富空间信息和语义信息的三种尺度输出,提高物体边缘区域和内部区域的匹配效果。最后,采用渐进细化的方式输出三个阶段视差图。消融实验结果表明,该立体匹配网络在KITTI 2015数据集上的误匹配率为2.32%,三个阶段的匹配速度均高于20PFS,与渐进细化的端到端实时立体匹配网络相比,精度大幅提高,且在物体内部区域和边缘区域匹配效果更佳,有效解决高精度和高速度难以权衡的问题。
其他文献
目的编制《助产士对家属陪伴分娩的态度问卷》,并检验其信效度。方法 1.以态度三元理论为基础,通过访谈10名助产士,结合文献研究形成问卷条目池,包括43个条目。2.通过两轮专家咨询和24名助产士对条目进行评价后,形成具有37个条目的测试问卷。3.借用问卷星发放问卷,共收集有效问卷470份,应用临界比值法、条目总相关系数法、Cronbach’sα系数法、探索性因子分析法建构助产士对家属陪伴分娩的态度问
学位
波纹腹板钢箱—混凝土组合(BCSWS)梁由波纹钢腹板—混凝土底板组合(BCSWC)梁对底板改进后得到的一种新型梁桥,用带肋钢底板取代混凝土底板,是一种受力合理、自重更轻及耐久性更强的钢混组合梁。BCSWS梁桥作为一种新型梁桥,其动力响应尚未进行深入的研究。本文结合大样本理论、Python语言及ABAQUS有限元软件,编写模型脚本程序,建立约2600个模型分析简支、连续及刚构体系下BCSWS梁桥的动
学位
随着我国市场经济的不断发展以及政府改革的不断推进,政府预算管理也随之发生着深刻的变革。当前财政收支矛盾日益凸显,让相对稀缺的财政资金用到关系民生,提升群众幸福感的地方至关重要。尤其是受新冠肺炎疫情的影响,真正坚守中央“各级政府必须真正过紧日子”的规定,这更加强化了预算绩效管理的重要作用。“十四五”规划里面强调要进一步强化预算制度改革,深化预算约束和绩效管理。我国从改革开放以来,不断地探索,经过萌芽
学位
行人检测是计算机视觉任务之一,其不仅作为其它计算机视觉任务例如行人再识别、行人搜索、行人行为分析、行人姿态估计等任务的基础,还广泛用于视频监控、自动驾驶、智能机器人等领域中。然而,行人检测任务面临着遮挡、姿态变化、光照、小行人等挑战。Anchor_free(无锚)CSP(Center and Scale Prediction)算法被提出,CSP算法结构简单。本文认为CSP仅仅预测行人的中心点和高度
学位
弗朗西斯·普朗克是二十世纪法国作曲家、钢琴家,他的钢琴作品《三首新事曲》风格迥异、轻松明朗,呈现出浓厚的新古典主义风格,值得笔者深入研究学习。本文通过文献查阅、分析归纳等方法对作品进行分析,主要分为以下三个章节。第一章中介绍普朗克生平及《三首新事曲》的创作背景,阐述普朗克不同时期钢琴音乐的创作特征。第二章中对《三首新事曲》进行音乐分析,分为以下几个方面:结构方面,布局清晰规整,在回归古典基础上创新
学位
随着我国宪法将依法治国确定为基本原则,公众参与成为了我国建设社会主义法治国家、开展政治生活的一个重要概念。随着我国依法治国方略的逐步确立,行政规范性文件制定程序中的公众参与途径不断优化,公众参与行政规范性文件制定成效显著。在实践中,各级行政机关广开言路,不断吸引更多公众参与到行政规范性文件制定中,实现公共利益最优选择,对此的理论研究也欣欣向荣。东莞市在行政规范性文件制定公众参与方面积累了一定的经验
学位
民事诉讼案件繁简分流进程中,独任制发挥着重要作用。我国近十年民事审判中有关法院适用独任制审理案件的数据表明,司法实践中,独任制在民事案件中适用范围呈扩张态势,具体表现在以下几个方面:独任制适用率在民事案件中总体保持快速增长;独任制在民事一审案件中占比持续增长;采用独任制审理的各类民商事案件数量总体呈增长态势,其中合同、无因管理、不当得利纠纷案件适用率最高;民事案件中独任制适用范围不断扩大。究其原因
学位
研学旅行作为“行走的课堂”,肩负“立德树人”的国家战略任务,在多年的实践中不断进步,注定会成为国家素质教育改革的有效途径,在提升中小学生核心素养,增强学生文化自信、地方认同感和家国情怀方面起到越发重要的作用。自2016年11月国家教育部将研学旅行纳入中小学教育教学计划后,全国各地都在大力推广,加之2021年“双减”政策的出台为研学旅行的发展提供更有利的政策保障。德阳是一座拥有厚重历史文化、科技工业
学位
土壤有机碳库在陆地上有着十分重要的作用,作为陆地上最活跃的碳库,其稳定性受许多影响因素的制约。研究土壤有机碳和碳组分的变化规律有助于进一步了解土壤的固碳机制。土地利用方式的变化能对土壤有机碳及碳组分造成巨大的影响。在不同土地利用类型当中,由于植被条件和人为对土壤的干扰程度不同,往往造成土壤物理、化学和生物性质的不同,从而影响有机质的矿化过程和分解速率。本文针对河湟谷地不同土地利用类型的开展研究,用
学位
人机对话是数代计算机与人工智能领域研究者和从业者为之努力和奋斗的方向,对话系统通常分为闲聊型对话系统、常见问题解答型对话系统和任务型对话系统,本文主要围绕任务型对话系统展开工作。任务型对话系统在实现方式上有端到端和管道式两种,管道式的对话系统通常由对话状态追踪模块、策略学习模块和回复生成模块组成。目前任务型对话系统在与用户进行多轮交互时,往往会存在意图和槽位识别困难、无法准确向用户传达信息的情况,
学位