嵌入式视觉同步定位与建图系统设计关键问题研究

来源 :合肥工业大学 | 被引量 : 0次 | 上传用户:sswang111
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视觉同步定位与建图(Simultaneous Localization and Mapping,SLAM)系统对于智能移动机器人实现自主探索与导航具有重要意义。目前的视觉SLAM系统面临着传统方法的发展已经饱和难以继续提升。传统方法有着计算流程专用固定、鲁棒性差、不同场景适应能力差、硬件加速困难等问题。现在相关研究多集中在用基于卷积神经网络(Convolutional Neural Networks,CNN)的方法替换原有功能模块,但仍然面临着如基于CNN的端到端SLAM方法无法进行后端轨迹优化致使在精度上明显低于传统SLAM方法、计算量大无法在嵌入式计算平台上实时运行等问题。因此本文针对目前嵌入式同步定位与建图系统中存在的关键技术难点从软件算法和硬件实现两个层面进行了相关研究,主要工作和创新点如下:(1)本文设计的SLAM系统前端采用两个视觉里程计,一个是高运行速度但精度较低的基于CNN的端到端视觉里程计,另一个里程计是低速度但高精度类型。通过将高精度视觉里程计间隔帧输入后的位姿关系结果作为进行后端局部轨迹优化的条件,为端到端的视觉里程计的轨迹优化提供了方案。同时结合了高精度视觉里程计直道上的精度优点以及低精度视觉里程计速度上的优势。(2)本文在后端优化策略方面,采用了基于滑动窗口的局部优化和基于关键帧的全局优化共同进行的优化策略,在保证优化精度的前提下降低了计算量。算法层面采用了位姿图优化的算法,避免了在更大的场景中的大量特征点会导致计算效率降低的问题,同时修改了部分G2o优化库的算法,使其对于早期帧的置信度高于后期帧,避免了在全局优化时修改了原本精度较高的早期帧的位姿。在对整个系统的精度以及速度测试中,本文方法相对其它SLAM方法具有一定优势,在配备有intel i7-8750h和NVIDIA 1080TI的硬件平台上实现了实时运行。(3)本文为前端的基于CNN的视觉里程计方法设计了专用的硬件加速结构,并在嵌入式计算平台ZCU102上部署实验。在前向推理阶段进行了网络数据格式的定点量化。采用的硬件设计计算速度优化策略包括了卷积计算单元的大规模并行计算、计算流程的流水线设计、网络计算中间参数的访存优化。最后的验证实验表明,对网络计算数据格式进行定点化可以在牺牲小部分轨迹精度的情况下大幅减少计算量,结合本文设计的硬件加速电路结构,使得整个系统可以在嵌入式计算平台ZCU102上实现了实时计算。并且与传统通用芯片以及同类CNN加速器对比,本文的设计的CNN网络加速器在计算性能、功耗和能效方面均具有优势。
其他文献
卫星通信技术因其传输距离远、通信质量高、对环境要求低等特点,被广泛应用在交通、国防、电视直播等领域,成为现代通信技术中不可替代的一部分。不同的调制解调技术对整个通信系统传输的质量以及稳定性有着很大的差异,针对不同类型的卫星通信网络,如何选择最适合的调制解调技术是整个通信系统需要重点考虑的问题,选择的多样性导致了调制解调器的种类繁多,对通信系统的研制和维护等环节带来了不利的影响。针对这些问题,本文根
学位
随着我国生育政策的改变,高龄孕妇的数量逐渐增多,胎儿健康问题逐渐成为受关注的热点。然而,在孕妇怀孕和分娩期间,胎儿的健康状况难以实时监测,一些胎儿可能会产生并发症。这些并发症会导致胎儿出现疾病、残疾甚至死亡,因此,在妊娠期对胎儿进行实时监护成为了时下亟需解决的问题。目前在医院等固定场景商业化广泛使用的是超声多普勒设备,但体积较大、使用难度大,并且超声波产生的多余能量会对胎儿造成伤害,因此不适合孕妇
学位
随着传统CMOS器件特征尺寸的不断缩小带来的短沟道效应和量子隧穿,使得以CMOS为核心的集成电路设计趋于物理极限,发展了半个世纪的摩尔定律即将失效。量子元胞自动机(Quantum-dot cellular automata,QCA)是一种全新的纳米器件,它具有极低的功耗、更快的开关转换速度,是CMOS技术之后极具潜力的纳米级器件的候选者之一。近年来,随着研究人员已经在QCA电路设计上取得了不错的进
学位
随着社会的快速发展,老龄人口人数的不断增加,同时因子女忙于生计而无法陪伴老人,大多数老人只能独居生活,意外跌倒已经成为威胁老人健康的几大危害之一。为了减少老人意外跌倒后没能及时医治所带来的危害,现代家庭对跌倒检测系统有着迫切的需求。随着监控摄像头和计算机视觉的快速发展,利用监控摄像头结合计算机视觉的跌倒检测方法具有智能、便捷以及可靠等优势,它已成为检测跌倒行为的有效方法。因此,本文将结合计算机视觉
学位
超表面是二维的亚波长单元阵列,可用于调控电磁波的波前分布、功率强度、偏振分布等。早期的超表面主要由相同结构的单元周期性排布而成,随着超表面研究的发展,可以对超表面单元的结构参数进行调制。合理设计阵列单元的振幅和相位响应分布可以使超表面具有包括反射、折射、聚焦、波束转向和轨道角动量(Orbital Angular Momentum,OAM)生成等多种电磁波前分布调控功能。在具备复用功能的超表面器件方
学位
在全球信息化持续高速发展的今天,信息泄露事件频发使得信息安全成为人们急需解决的问题之一。RSA算法作为一种非对称算法,凭借技术成熟,安全性高的特点在信息安全领域得到了广泛应用。然而面对日益增多的安全需求以及计算机算力的不断提高,RSA算法需要采用大位宽密钥保证安全性的同时加密更多信息,但是大位宽密钥会显著降低加解密的效率。因此,RSA算法进一步发展的瓶颈在于提升计算速度和吞吐量,针对这两方面研究的
学位
人工智能是一门致力于模拟和拓展人类思维的新兴学科,其旨在通过众多技术手段,来模拟人类思维以及学习事物的过程,从而使得计算机能最终代替人类工作。机器学习作为实现人工智能的重要的工具,常常被用以挖掘数据之间的潜在映射关系,并因其卓越的表现,被推广应用于量子信息科学领域,例如机器学习辅助的量子纠缠识别、量子传感增强、多比特量子信息读出,多体系统模拟以及量子纠错码解码器构建等。深度学习作为机器学习的重要技
学位
太赫兹的频谱范围介于微波频段和红外频段之间,结合了二者的优越性,在通信,生物医学和无损检测等领域展现出巨大的科研价值和应用前景。但是一直以来都缺乏可以直接对太赫兹波进行高效调控的自然材料,高性能太赫兹功能器件的发展依旧处于初级阶段。液晶具有双折射特性且其应用领域可以拓展至太赫兹频段,可在外加电场或磁场作用下实现连续调谐功能。但是研究发现液晶材料在太赫兹频段的特性表现不同于光学频段,精确的了解液晶在
学位
随着半导体芯片技术的不断发展,硅基材料已经在器件工艺方面逼近了这一材料的极限。因此,如何利用新颖的低维纳米材料实现高性能器件设计,是未来科研人员的主要研究方向之一。本文主要基于准一维锯齿边缘型碳化硅纳米带,提出了“T”型器件模型和“品”型器件模型,并对两种器件模型所具有的电学输运特性进行了理论计算,讨论了这两种器件模型背后所具有的物理机制。本文的主要工作如下:(1)利用密度泛函理论(DFT)结合非
学位
近年来随着通信技术的不断发展,人们对太赫兹频段的高性能天线需求日益迫切。可重构阵列天线凭借其高增益,高带宽,波束扫描和波束合成等特性受到极大的关注。液晶材料作为一种具有大范围介电常数可调特性的材料,可以用于构造毫米波及太赫兹可重构反射阵列天线。本文围绕基于液晶的电控可重构反射阵列天线设计,开展了液晶反射式移相器设计与制作、偏置电压线布局、二维波束扫描等关键技术的研究。主要工作内容如下。首先采用双偶
学位