基于IMU与单目视觉融合算法的视觉惯性里程计软件设计

来源 :浙江理工大学 | 被引量 : 0次 | 上传用户:sophia_je
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
SLAM技术广泛应用于无人飞行器、无人驾驶、AR、VR等行业中。以相机和IMU为传感器的视觉惯性里程计是SLAM系统中的里程计前端,主要负责定位功能,即测量载体在三维空间的运动轨迹。本论文主要内容为设计高精度、鲁棒性好、实时性好的能够实现自主定位的视觉惯性里程计软件,在论文中给出了适用于单目相机和IMU数据的视觉惯性里程计软件框架,整个软件分为三部分内容:图像与IMU数据预处理,视觉惯性里程计初始化,视觉惯性里程计滑动窗口优化。图像和IMU预处理是指对原始图像和IMU数据进行处理。在本论文中,对图像使用光流法进行特征点跟踪,构建特征点与图像帧的观测图模型。对IMU数据,推导出两帧图像帧之间的IMU预积分公式,通过数值积分法对每相邻两图像帧的数据进行预积分求得预积分项。预处理后的图像和IMU数据将用于视觉惯性里程计初始化和优化计算。视觉惯性里程计的初始化是视觉惯性里程计系统中非常重要的一部分。本论文分析了初始化在视觉惯性里程计中的重要性,给出了基于视觉与IMU测量融合的联合标定方法。首先根据纯视觉数据恢复初始运动结构,再根据IMU测得的旋转与视觉求得的旋转差异构造最小二乘项,使用最小二乘法初始化陀螺仪漂移。再根据IMU测量模型造最小二乘项,初始化重力向量,视觉尺度因子,初始速度以及初始位姿,并根据重力方向确定全局参考坐标系。经过初始化后即可得到载体在初始时刻的一小段轨迹。滑动窗口的优化是视觉惯性里程计的最后一部分,用于求解载体在最新时刻的位姿并实时对轨迹中最末端的一段进行优化以减小累积误差。在轨迹末端设置一个包含固定数量图像帧的滑动窗口,提取滑动窗口内的视觉误差项、IMU观测误差项以及先验误差项,通过Ceres非线性优化库实时地对滑动窗口内各图像帧状态进行优化计算。最后,使用了不同数据集来测试本论文中的视觉惯性里程计软件性能,同时用传感器设备自采集数据进行实验,测试本里程计软件的在不同运动环境下的鲁棒性与实时性。
其他文献
本文根据青海自然灾害种类多,而且每年频敏发生,给农牧业生产和其他经济工作以及自然均为各种危害损失的情况,提出了今后作好防灾减灾工作的措施。
全面介绍了山区公路挖土方边坡、填石方边坡如何种草,防止水土流失,对山区公路边坡水保治理提出了经济可行的治理办法.
本文系统地概述了高等学校微机实验室管理的一般原则和方法。并结合我校实际,提出了三维管理这一微机实验室管理的新方法,从机房物资管理、安全管理、环境保护和日常维护与使
同学们在学习二元一次方程组时,一定碰到过类似这样的问题:  已知关于x、y的方程组[4x+y=3m,2x-xy=9m.的解满足2x-3x=36,试求m的值.  这是关于方程组的解满足一定条件的
期刊
目的了解云南省部分地区鸡蛋中兽药及禁用药物残留水平,为监督执法的提供技术支撑。方法采集云南省昆明等部分地区超市、农贸市场销售的鸡蛋67份,按照国家标准方法和《2016年
在ICD-10编码应用前的数据库中,只有ICD-9一种编码,我们在统计分析这些数据资料时,常常需要这些出院病人入出院诊断的ICD-10编码,这就需要将这些病人资料中的ICD-9编码转换为ICD-
互联网时代,传统期刊的内容传播方式发生了巨大的改变,学术期刊受众面小,传统经营方式成本高,其竞争力会逐渐减弱。对此部分学术期刊做出了与新媒体融合的尝试,但是效果并不理想,因
大多数临床研究和流行病学研究中,我们只关心一个终点(end point),这个终点通常是由于某种疾病导致的死亡,然而利用多状态模型(multi-state model)考虑多个终点的研究越来越
飞机的液压能源系统是保障其任务完成的关键系统之一,为保证它的安全性及高可靠性,一般采用双余度设计或冷热备份设计,关键部件甚至采用多余度。故障重构是在确定了余度等级
从美国加州到中国贵州,从美国硅谷到贵州赤水河河谷,纵观全球,在工业化程度不断加深的今天,科技创新已成为推动产业变革与发展的原动力,而深居中国贵州赤水河河谷的国酒茅台始终坚