基于语义信息辅助的无人机视觉/惯性融合室内定位方法研究

来源 :南京航空航天大学 | 被引量 : 0次 | 上传用户:NSWDAR
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,无人机在室内场景中的应用越来越广泛,卫星拒止以及室内场景的随机性与复杂性,对无人机的自主导航定位带来了新的挑战。为满足无人机的智能安全飞行需求,导航系统必须输出持续可靠的导航定位信息,保证位姿解算的精度和鲁棒性。视觉传感器由于感知信息丰富,已经被广泛应用在无人机的室内自主定位方案中。在未知环境下,无人机通常采用视觉里程计算法实现自身自主定位,确保飞行稳定。但在室内复杂环境中,传统的基于特征点的视觉里程计算法通过底层亮度关系进行描述匹配,抗干扰能力不足,会出现匹配错误甚至失败的情况,导航系统的精度及鲁棒性还有待提升。室内环境存在着丰富的语义信息,与传统特征点相比,高维语义特征具有良好的抗干扰能力,可以在视角、光线变化情况下稳定匹配,降低无人机位姿估计的不确定性,同时赋予无人机更加抽象的场景信息,帮助其完成更为复杂的室内导航任务。为了进一步拓展无人机的适用范围,惯性传感器作为纯自主传感器,能够在视觉不可用的情况下对传统的视觉里程计进行互补,同时提供高频率的导航信息。为此,本文结合室内飞行环境的具体约束与特点,以传统视觉里程计为基本框架,研究语义与惯性信息辅助的融合定位方法,为无人机提供导航信息,提高其定位精度与鲁棒性,解决传统视觉里程计(Visual Odometry,VO)可靠性、稳定性不足的问题。论文首先构建了一套基于语义信息辅助的视觉/惯性融合定位架构,在传统基于特征点的视觉里程计的基础上,设计了语义信息与惯性信息的融合导航方案。对基于特征点的RGB-D视觉里程计技术进行了研究,设计了无人机室内RGB-D(Red,green,blue,depth)视觉里程计框架,并对其中的特征点提取、数据关联以及位姿优化方法展开研究,通过随机采样一致算法实现了特征点匹配过程中的外点剔除,利用可拓展非线性方法实现了后端位姿优化估计,为后续的语义信息辅助以及惯性融合奠定融合框架基础。为提高相似环境下无人机室内定位的精度,论文将室内语义信息进行因子建模,并与传统VO方法进行融合,设计具有更高鲁棒性的语义VO系统。研究了基于卷积神经网络的语义信息提取方法,并根据室内环境中大量物体表面为平面的特点,提出了一种基于平面约束的语义特征提取及表示方法,并对基于连通域的结构化点云平面分割算法开展了研究。随后研究了基于语义信息辅助的导航定位技术,提出一种语义特征构建及前后帧数据关联方法,实现对语义平面特征的因子建模,并构建了相应的因子图优化方案,提高了无人机的导航定位精度。为了进一步提高无人机室内定位的鲁棒性,提升无人机视觉导航系统在动态复杂情况下的定位精度,论文在上述语义信息辅助VO的基础上,研究了基于惯性预积分约束的视觉/惯性融合定位方法。针对IMU的高频率特性,在语义特征跟踪过程中实现快速预测关联,并对惯性预积分技术进行研究,通过视觉关键帧之间惯性信息的累计,获取两帧之间相对位姿的惯性量测约束,提高系统鲁棒性。建立了惯性预积分非线性优化模型,对融合了惯性的非线性优化目标函数进行补充构建,并研究具体的优化过程及求解。所实现的惯性/视觉融合定位方法,在原算法基础上,增添了IMU量测约束,进一步提高了无人机室内定位的鲁棒性及精度。最后,论文设计了无人机室内飞行验证平台,对所提出的语义信息辅助视觉/惯性融合定位算法进行了综合验证分析,利用运动捕捉系统提供的位置参考,对所提算法的定位性能和精度进行了验证。结果表明,本文所提出的语义信息辅助的无人机视觉/惯性融合室内定位算法具有较好的精度和鲁棒性,为实现无人机在室内飞行场景下的应用提供参考。
其他文献
随着无人机的应用发展,自动着舰控制技术逐渐成为无人机海上作战的一个重要研究领域,其中,静不稳定布局的无人机凭借其先进的气动特性、突出的隐身性能等优点,在军事领域具有广泛的应用前景,且无人机着舰时需要在舰尾流、甲板运动等干扰影响下沿着相对轨迹飞行并在十分狭小的区域着舰,增加了着舰控制的难度。因此研究静不稳定无人机的着舰控制技术,对我国军事技术发展意义重大,本文围绕这一问题,开展了相应的研究工作。(1
学位
<正>2022年第9号台风“马鞍”8月25日登陆广东。受其影响,海南、广东雷州半岛及广西南部沿海出现强降雨过程。水利部滚动会商研判,根据《水利部水旱灾害防御应急响应工作规程》,8月23日12时针对广东、广西、海南、贵州、云南5省(自治区)启动洪水防御Ⅳ级应急响应,派出2个工作组分赴广东、广西协助指导地方做好台风强降雨防御工作。
期刊
近年来,随着工业自动化程度日益加深,旋转机械设备的应用愈加广泛,保障设备的正常运行也越来越凸显其重要性。目前研究人员通常从转子系统的转子轴心轨迹中分析出设备状态信息。作为轴心轨迹分析的数据基础,其轴心轨迹测量的重要性不言而喻。传统传感器测量方法存在安装复杂、测量环境适用性低等问题,本文提出了基于机器视觉的轴心轨迹重建方法,并进行了实验验证。首先,针对传统传感器测量轴心轨迹时存在布置复杂等问题,采用
学位
无人机凭借其诸多优势在军用和民用等领域占据了十分重要的地位。不论执行何种任务,无人机的安全避障飞行是完成指定任务的前提。本文针对无人机安全避障飞行问题进行研究,主要包括基于航路规划算法的期望安全飞行航路生成方法和安全飞行航路的无人机跟踪控制方法。具体研究内容如下:首先,针对面向安全避障的无人机飞行跟踪控制问题,建立了无人机非线性数学模型,并分析了无人机的开环零输入响应和耦合情况,同时基于模型特性建
学位
由于小型无人机具有轻巧灵活、飞行速度慢、可操作性强及不易探测等特性,传统的空中威胁探测系统无法很好地适用于小型无人机对象的探测。而红外探测技术具备抗干扰能力强、隐蔽性好和适应天候能力强等优点,其价格和维护成本相对低廉,特别适合于低空空域动态无人机目标的探测。论文将红外探测技术应用到反无人机系统中,针对局部低空防务需求,基于空中无人机的红外特征对目标检测与跟踪技术展开研究,并在工程硬件平台上加以验证
学位
随着物流、通信、计算机等行业技术水平的快速发展,如今,多旋翼飞行器不仅在军事上广泛应用,它在农药喷洒、电力巡检、地理测绘、人员搜救、物资投放与运输等方面也应用广泛。然而,对于执行重要任务或者搭载昂贵仪器的多旋翼飞行器而言,其系统复杂度较高,容易受到周围环境的干扰,当飞行器发生故障时,如执行器故障,容易导致控制系统不稳定,引发坠机。因此,研究其控制系统的容错控制方法,对保证飞行器能够安全飞行具有重要
学位
<正>1962年初,上海图书馆设立由顾廷龙直接支持的"资料组"。它是秉承市文化局方行副局长意旨设立的,业务内容也多是由方行安排的,诸如整理杨昌济《达化斋日记》、许地山《三百年来妇女服装》,而不是武重年先生口述史所称"搞古代近代书目"。当时资料组工作成员仅三人,组长姜长林先生,组员是资深馆员王煦华先生和我。我刚从大学毕业未久,主要工作是主心骨王煦华承担,我只能是客串,跑龙套,做些打杂而已。
期刊
目的:基于《食品安全国家标准食品中维生素B12的测定》(GB 5009.285—2022)新国家标准即将实施,验证微生物法测定乳粉中维生素B12的可操作性和可行性。方法:在标准方法的基础上优化测试菌液的制备和保存方法,通过分析标准曲线线性,采用已知含量的质控样和回收率加标试验来验证方法的准确性,同时对5组不同品牌的乳粉进行精密度试验检验其重复性。结果:维生素B12含量在0~0.1 ng线性关系良好
期刊
随着计算机技术、电子、微电子技术的不断发展,无人机技术日渐成熟。目前,四旋翼无人机在民用领域中得到了广泛的应用,成为无人机领域的研究热点。由于四旋翼无人机体积小,重量轻、航程短,单架无人机的应用受到了极大的限制,多架四旋翼无人机编队飞行则可以完成相对复杂的任务,可以提高任务执行的效率和可靠性,能够拓展在搜救、监测、探伤等等领域的应用。论文对四旋翼无人机分布式编队飞行的通信组网和分布式编队控制算法进
学位
当前,随着人工智能技术的发展,汽车智能化水平大幅度提升,逐渐从实验室迈向工程应用,智能汽车融入城市交通首先要解决行车安全性问题。城市交通场景属于日常行车的常见工况,且城市交通场景往往较为复杂且存在不确定性,而智能汽车必须能够有效处理复杂城市交通场景下车辆的安全控制问题。针对无信号灯路段行人-车辆混行的常见城市工况,提出一种考虑人车混行的多场景动态安全距离模型,分别设计以舒适度为导向的避撞控制策略和
学位