基于深度相机的无人机三维场景重建技术研究

来源 :桂林电子科技大学 | 被引量 : 0次 | 上传用户:taowangqing
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
计算机视觉技术的进步以及激光雷达、消费级RGB-D相机、双目相机的出现,促使三维重建技术在医疗卫生、机器人技术、电力巡检、虚拟现实、犯罪现场还原、建筑基坑施工等方面有着广泛应用。传统对单个物体的重建技术已日趋成熟,三维重建技术正朝大规模、大动态的场景重建方向发展。然而,以手持三维重建设备重建小规模场景的方式不适用于大规模、大动态、存在危险的场景。四旋翼无人机具有机动性强、灵活性大等优点,非常适合替代人工执行脏、危险、困难的任务,例如矿井巡检、隧道坍塌救援等任务。鉴于此,本文对基于深度相机的无人机三维场景重建技术展开研究,并搭建了可对场景实时重建的四旋翼无人机平台。本文主要完成以下工作:提出了一种场景导向式KD-tree点云滤波算法。传统点云滤波算法主要依赖于概率学模型假设,然而由于环境的复杂性导致噪声及离群点的分布并不完全服从于假设的模型,从而传统的滤波算法不能达到良好的滤波效果。另外,传统点云滤波算法通常需要对样本逐个遍历,因此耗时较高。针对这些问题,本文针对隧洞、走廊、矿井等场景的结构特点,提出了一种场景导向式KD-tree点云滤波算法。首先对点云下采样后计算其重心,再设定搜索半径阈值,最后依据所计算得到的重心及搜索半径结合KD-tree分割出场景结构并保留,从而达到滤波目的。采集了147帧RGB-D图像用于实验,从滤波效果和算法耗时两方面验证了所提出的算法。实验结果表明,提出的算法不仅具有良好的滤波效果,而且在算法的处理速度方面,相较于传统的半径滤波算法、统计滤波算法分别提高了4.8倍、14.2倍。以ORB-SLAM2系统为基础,基于ROS分布式计算框架构建了点云重建系统。系统主要分为三个节点,主要包括相机节点、位姿估计节点、重建节点。相机节点负责接入RGB-D相机并采集RGB-D图像,然后将RGB-D图像以话题形式发布;位姿估计节点运行ORB-SLAM2系统相机对位姿进行跟踪,并将位姿信息转换为里程计信息并发布话题;三维重建节点订阅RGB-D图像消息和里程计信息,将RGB-D图像转换为点云并滤除点云中的噪声及离群点,然后依据里程计信息提供的位姿将点云转换到世界坐标系下完成各帧点云的拼接,进而重建出场景的三维模型。搭建了无人机三维场景重建系统的硬件平台并完成了测试。首先设计了系统软硬件框架,基于设计的框架应用Rotor S四旋翼无人机仿真模型在gazebo下搭建了仿真环境对系统进行测试。然后,根据设计的框架确定了各个硬件模块,之后完成了实物搭建。其次,针对无人机桨叶遮挡相机采集的问题,采用有效区域裁剪的方法进行处理。最后,在实验室外部走廊进行了飞行实验,重建出了走廊的三维点云模型。
其他文献
学位
学位
近年来,越来越多的光纤技术领域中需要光纤微透镜,光纤微透镜是将光信号从一端有效地传输到另一端口的光纤器件,在光通信、传感、激光信号处理等领域有着较大的研究价值和应用前景,因此,基于光纤制作的微透镜已成为光纤技术领域中的研究热点。在光纤端面制作微透镜是促进光纤和激光信号模态匹配最有效的低成本方法,可以有效提升激光信号的耦合效率。通过在光纤端面形成特定的透镜结构,可以对光纤出射光做任意的光场变换。随着
随着科技的进步和时代的发展,人们对定位的要求越来越高,全球定位系统已经满足了人们在室外活动的需要,但是在室内环境下不能很好的使用。随着人们对室内定位的使用要求越来越多,在商场,机场,工厂等场所对精确定位和引导的要求也越来越高,使得室内定位技术正成为研究的热点。超宽带定位具有定位精度高,并能很好地应对多径衰落场景、功耗低、信号保密性好等优势,为高精度室内定位提供了很好的基础。本文主要分为以下三个部分
近年来,无线技术的迅猛发展对现代通信系统通信的质量及安全性提出了更高的要求。跳频、扩频移动通信技术因具有随机性和抗干扰抗衰落能力强等特点而被广泛应用在军事通信。然而,要实现跳频、扩频通信技术的应用,就需要宽带、超宽带的鞭状天线。因此,基于现代军事需求,本文设计两副VHF/UHF频段的车载超宽带天线,主要工作详述如下:1、超宽带鞭状天线的研究与设计。采用结构等效的思想,研究阶梯式渐变结构等效成双锥结
学位
空间调制全偏振成像系统可同时获取全偏振分量信息,并从中得到多元的互补信息。空间调制全偏振成像系统采用静态的调制结构,能够实现对运动目标进行偏振成像探测,故它属于同时偏振成像方法中的一种。本文介绍了空间调制全偏振成像技术在国内外相关领域的研究进展,并详细地阐述了空间调制全偏振成像信息处理技术的发展现状。根据空间调制全偏振成像系统的结构特点,研究有效光谱带宽对干涉数据解调精度的影响。同时依据干涉图和差
研究表明,人类获取外界信息约80%是通过视觉获得的,双目视觉是模拟人眼视觉系统来获得现实世界信息的系统,是计算机视觉技术的一个重要分支,经过多年来的发展,在机器人视觉、反求工程、工业检测和医学成像等领域中的应用越来越广泛。立体匹配是双目视觉的一个重要环节,立体匹配的结果直接影响三维重建的效果,但是由于立体匹配过程会受到各种因素的影响,比如光照、物体遮挡和弱纹理等,会导致视差图的精度不高,如何提高视
学位
一些卫星载体的位置和形态相对于地球在不断发生着变化,多变的运动状态将影响其与地面天线的通信质量,而具有波束扫描能力的天线可以很好的解决这一问题。本文将液晶材料作为全息天线的介质,利用其电调谐能力实现波束扫描,并通过在天线顶部加载超表面来实现高增益。具体研究内容如下:1.基于液晶波束扫描的全息天线研究。研究了液晶介质的可调谐原理,通过控制液晶的偏压可实现其介电常数的变化,将液晶作为天线的介质基底即可