基于时空深度学习的单目自监督视觉里程计研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:zy1yi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
定位技术对于机器人的自主智能化运行至关重要,其起到感知外界环境,估测自身状态的作用,对诸如导航避障探索等任务有重要影响。本文所研究的单目视觉里程计是一种成本低、环境适应能力强的里程计方案,其从单目相机获取的图像序列中解算出帧间位姿变化,并增量式的重建全局运动轨迹。当前视觉里程计发展的一大趋势是传统几何原理与深度学习技术的融合,本文从三个方面对此展开了研究。针对单目自监督场景深度估计任务,本文提出在位姿变换子网络中引入软注意力机制帮助特征选择,从而借由场景深度与帧间位姿变换的耦合关系间接提升场景深度估计精度;另外,考虑实际场景中存在运动遮挡等反假设情形,导致网络训练难收敛,提出了一种基于光度误差分布图的可学习的离群掩模模块来剔除误导像素点。实验结果显示,所提出算法的多项评估指标在KITTI数据集上取得了同时期先进水平。该部分研究的场景深度估计将为本文第二部分中所提出的混合式视觉里程计提供3D场景信息辅助。文章第二部分提出了一种融合几何原理先验,考虑多帧时序信息的基于自监督式深度学习网络的混合式单目视觉里程计算法框架,包含三点工作:利用第一部分提出的自监督场景深度估计网络估计场景深度为视觉里程计算法框架提供3D信息辅助;组织场景深度估计网络与场景光流估计网络作为特征提取与匹配前端,提升模型的多场景鲁棒性,并综合多帧匹配情况选择匹配帧;设计求解器模块,根据场景情况自适应的选择3D-2D匹配对或是2D-2D匹配对求解帧间相机位姿变换。实验表明,所提出的混合式算法较其他方法在各场景序列下的平均误差都有下降,平移误差为2.211%,旋转误差为0.418°。本文最后一部分提出了一种利用图像合成手段在待估计位姿变换的两帧之间插入合成新视图,将对真实两帧之间的位姿变换估计分解成从真实一帧渐进式过渡到真实二帧的多个中间位姿变换估计,最后合并多个中间变换形成修正后的两帧之间位姿变换估计。这样设计方案的好处是,不需要在网络训练时考虑多层级预测的误差传播,减轻网络训练负担,并且因为是单独的事后修正模块,可插拔式的方式更加灵活。实验结果显示,在所提出的位姿修正模块加持下,第二部分算法精度进一步提升,平移误差相对下降约10%,旋转误差相对下降约15%。
其他文献
宾语区别标记是一种跨语言的现象,指的是语言对作宾语的某些名词或名词短语作有别于主语形态的宾语标记,而对作宾语的其他名词或名词短语不作有别于主语形态的宾语标记的现象。以往对宾语区别标记影响因素的研究主要是从认知的角度出发,集中于直宾本身的显著性特征,即生命度、有定性、确指性和话题性,和主、宾语相对显著性特征,如及物性和个体性等。本研究提出名词的性、数和语音形式也是影响语言宾语区别标记的因素。本研究以
学位
随着数字时代的到来,移动互联网的飞速发展,互联网广告成为现代企业营销的重要形式。2022年1月,《2021中国互联网广告数据报告》正式发布,据统计,2021年中国广告与营销市场规模合计约为11608亿元,其中互联网广告收入达到5435亿元,同比增长9.32%。伴随我国“十四五”计划的开展以及供给侧结构性改革的深化,互联网营销学者及专家们预计2022年广告产业将全面实施数字化转型,促进广告市场跨越式
学位
数字电液控制系统(Digital Electric-Hydraulic Control System,DEH系统)作为汽轮机的调节系统,其液压部分元件长期工作于高温、高压等相对恶劣的极端环境中,不可避免地会出现各种故障。汽轮机机组能否一直维持稳定状态主要由汽轮机DEH系统决定,利用各种传感器技术对DEH系统进行状态监测,并基于监测数据进行相应的故障检测与诊断,能够有效避免汽轮机机组发生灾难性事故。
学位
英语是当今国际学术界所通用的媒介语言,其重要性可见一斑。强调学术英语写作的作用对中国学术成果走向世界、提升中国研究者的国际学术影响力具有重要的意义。研究生群体是各个学科专业的后备学术人才力量,培养他们的英语学术写作能力对提高我国未来科研人员的学术能力十分有益。因此,研究提高英语学术写作能力的教学方法具有重要的应用价值和战略意义。目前,我国研究生与母语者的英语学术写作的差距表现在哪些方面是我国英语教
学位
近年来国内学者越来越重视“三全育人”“协同育人”研究,主要围绕“三全育人”“部门协同育人”“主体协同育人”和“教师协同育人”等方面进行。但现有的研究成果都侧重于碎片化、零星化的协同模式,缺少从宏观视角去研究具有可复制、可推广的课程思政协同育人机制。在此基础上,从“三全育人”宏观视角,提出构建高校课程思政协同育人的联动保障机制、教师育人意识和能力培养机制、教学实施与管理机制以及协同育人效果评价机制等
期刊
报纸
文章从做好建筑屋面防水的重要性入手,分析了建筑屋面渗漏水常见原因,并针对性地提出提升建筑屋面防水施工技术的方法措施,目的是整体上达到建筑屋面的防渗漏水效果。
期刊
2013年我国超越美国成为全球最大物流市场,2020年我国社会物流费用与GDP比值降至14.6%,但是对这个比值的真正含义一直争论较大。本文对我国社会物流费用与GDP比值在不同发展阶段的变化以及影响因素进行分析,并结合我国单位货物周转量费率实际,对该指标进行了再认识,认为该指标受经济体内产业结构、产业布局、资源分布及生产力水平等因素影响,存在一个合理的区间值,过高或过低都意味着这些影响因素的不合理
期刊
报纸
企业社会责任的重要性越来越受到关注,而企业如何通过公益活动等形式达到自身营销战略目的也成为企业履行社会责任过程中的一个现实问题。公益营销概念由西方引入中国较晚,企业需要强化公益营销确实能够带来经济价值的认识,既无必要成为“无名英雄”,也要摆脱“伪善者”的负面影响,而是通过公益营销活动来激发消费者情感共鸣,并引导其参与及购买。本文研究的核心内容是如何设计公益营销从而引导消费者购买意愿,以及公益营销整
学位