基于鱼眼相机的点线融合SLAM系统研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:yidao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
同时定位与建图(Simultaneous Localization and Mapping,SLAM),是无人驾驶领域的关键技术之一,其目的是根据周围环境信息获得车辆的位置信息。视觉惯性信息融合是SLAM领域的主要研究方向之一,其综合了视觉传感器和惯性传感器的优点,将两种传感器信息进行融合,利用惯性测量单元(Inertial Measurement Unit,IMU)的运动信息确定单目视觉的尺度因子,同时利用摄像头获取到的环境信息对IMU的漂移进行约束。当前视觉惯性融合的同时定位与建图(Visual-Inertial Simultaneous Localization and Mapping,VI-SLAM)系统存在以下问题:在低纹理区域、快速运动引起图像模糊或光照突变等情况下,由于特征点的不足使得系统定位精度降低或系统失效。为了提高系统在上述情形下的鲁棒性,本文将利用具有大视场角(Field of View,FOV)的鱼眼相机,对现有的点线特征融合的VI-SLAM系统进行改进。本文以VI-SLAM系统为研究对象,讨论点线特征融合在VI-SLAM系统中的有效性。文章主要从传感器模型及其标定、VI-SLAM系统中线特征算法、点线融合的VI-SLAM系统三个部分进行讨论。对于传感器模型部分,对鱼眼相机的投影和畸变模型进行了分析,阐述了惯性测量单元的工作原理及其误差模型。对鱼眼相机和IMU进行了联合标定,获得了较为可靠的内外参数。传统VI-SLAM系统前端使用特征点或光流进行位姿求解,在此基础上,本文引入了空间中的线特征,对线特征提取算法与描述子进行了详细解读。为了提高空间中线特征在系统中的运算效率以及解决其在后端优化中过自由度的问题,引入了普吕克坐标与正交表示法。通过采集图像进行线特征提取对比实验,证明了本文所采用线特征提取算法的优越性。然后对整个VI-SLAM系统框架进行了介绍,首先完成视觉初始化,视觉观测与IMU观测进行数据对齐,恢复出真实尺度。随后推导了IMU预积分模型、点线特征观测模型,并分别计算其雅可比矩阵。后端优化则利用基于滑动窗口的Bundle Adjustment对视觉重投影误差、IMU积分误差以及先验误差进行最小二乘优化。最后为了验证本文所设计程序的定位精度与运算效率,在公开数据集上进行了精度对比实验与帧率对比实验。实验结果表明在定位精度方面,本文所设计程序绝对位姿误差的均方根值相比VINS-Mono降低了11.5%,相对位姿误差的均方根值降低了66.8%。相比同样为点线特征融合的PL-VIO,帧率能够达到10Hz,满足实时性要求。通过搭建移动实验平台,在室内复杂场景下进行了定位实验,在经历了强曝光、弱光照、低纹理等场景后,系统仍能较为准确地进行位姿估计。实验结果表明,本文所设计程序具有较好的定位精度及鲁棒性。
其他文献
近年来,随着大数据、区块链、人工智能等技术的迅猛发展,科技与金融的结合越来越紧密,这极大地冲击了银行的运营模式,缩小了银行的利润空间。基于此,本文以金融科技为背景,分析了金融科技助推商业银行转型升级的模式以及所面临的问题和挑战,并且提出了相应的建议。
近年来,银行步入4.0时代,各商业银行也纷纷将数字化转型纳入核心战略范畴,并以此为切入点结合重点业务领域、渠道载体以及应用场景大力推进金融科技赋能模式创新,积极探索"第二发展曲线"。经研究,金融科技在应对新冠肺炎疫情困境,有效助力各商业银行适应时代变革中发挥了重要作用,主要体现在金融科技助力"零接触"服务,
期刊
信息化时代的到来,互联网技术逐渐走入人们的视野,计算机作为一门独立的学科,已然成为大中小学校学生的必修课。尤其是在小学阶段,通过计算机教学,可以让学生们在海量的信息当中获取想要获得的信息和知识,丰富其文化学识、强化小学生的动手操作能力。与此同时,还有利于培养小学生的信息素质,使学生对信息进行科学的筛选和甄别,从而客观有效地看待现实问题。本文主要研究小学计算机教学中学生信息素质的养成对策。
文章阐述了小学数学课上的提问如何引起学生思维的冲突,激发思考动力,培养创新意识。
针对单目视觉惯性SLAM算法鲁棒性不高且尺度恢复困难的问题,提出基于动态边缘化的双目视觉惯性SLAM算法(DM-SVI-SLAM)。前端使用光流法进行特征跟踪,利用预积分计算帧间IMU,后端在滑动窗口内融合单/双目匹配点误差、IMU残差及先验误差构建捆集调整的成本函数,利用动态边缘化策略、Dog-Leg算法提升计算效率,回环检测使用词袋方法对关键帧重定位。通过EuRoC数据集评估系统性能,实验结果
计算机视觉和机器人技术的迅速发展,使得基于视觉和惯性传感器的融合定位方法已经成为机器人同时定位和建图方向的关键研究点之一。相机与惯性传感器(Inertial Measurement Unit,IMU)采集到的信息之间具有高度互补性,IMU信息可以在机器人快速运动时或处于弱纹理低光照等恶劣场景时完成粗略位姿估计,而图像信息则可以帮助修正IMU累积的漂移。目前,点特征是视觉前端使用较多的特征,但它对场
在教育教学活动中,教师普遍会使用课堂提问的方式和学生进行互动。教师在讲解完本节课所要学习的内容之后,通常会对学生进行相关内容的提问,在检验学生学习效果的同时加深学生对知识的记忆理解,有效提高数学课堂教学质量。从如今的小学数学课堂教学情况分析,教师课堂提问不管是在内容上还是方式上,都有极大的上升空间。鉴于此,本文围绕小学数学课堂提问艺术展开相关探讨,希望能够让小学数学教学更加高效。
本文对我国农田镉污染现状和危害进行了阐述,总结了当前用于修复农田镉污染的方法,并分别分析了其优缺点,提出了联合修复和新材料修复技术的应用前景,以期为农田土壤镉污染修复提供参考。
学位