基于端边协同的轻量级视觉SLAM方法研究

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:hziyin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
科学技术的进步,使得人们对美好生活的向往有了更深层次的追求,人们已不满足于只能完成单一既定任务的设备,而是更青睐于具有一定思维能力的智能机器人。SLAM是人工智能技术的重要基础,其赋予了机器人自我感知世界的能力,通过搭载特定的传感器,在未知的环境中实现对环境模型的构建,同时估计自己的运动。目前,SLAM技术已被广泛应用于智能机器人、无人机、自动驾驶以及AR/VR等领域。伴随着计算机视觉技术的飞速发展,视觉传感器因其价格低廉、体积小和易部署等优势也得到了广泛的应用,研究一种以视觉传感器为主导的同时定位与地图构建方法成为了学者们所关注的话题之一。SLAM定位的实时性以及地图的高精度,依赖于一定的视觉计算和地图刷新频率,对系统计算和存储的需求高,导致资源有限的平台随着算法的迭代更新而失去支持。虽然引入DSP、GPU和FPGA等硬件资源能满足视觉SLAM方法的运行需要,但大量的同构处理器设备仍无法得到有效的应用,硬件成本的提高也违背了视觉SLAM方法低成本部署的初衷。此外,SLAM还面临着数据传输与共享的问题。一方面,SLAM实时生成的地图依赖于充足的存储空间,长时间运行必须对历史数据进行传输转移;另一方面,地图数据除了用于自身的定位,更要为其它上层的应用提供数据共享服务。为此,本文针对视觉SLAM方法在资源有限平台上的应用问题,提出了一种基于端边协同的轻量级视觉SLAM方法,重点解决算法的实时性和地图数据处理等问题。本文的主要研究内容如下:1)对目前主流的视觉SLAM方法进行调研与分析,提出视觉SLAM方法轻量化部署所遇到的问题与挑战。对已有的视觉SLAM方法进行深入的研究,从原理上分析各种算法的优点与不足,为本文进一步的研究奠定坚实的基础。2)特征点不受光照影响,具备旋转不变性和尺度不变性等优点,使得基于特征点法的视觉里程计有很高的准确性和稳定性,但该环节相对耗时,是提高实时处理帧率所要解决的首要问题。本文通过对特征点提取环节的理论分析,提出了一种基于并行化加速的特征点提取方法,能显著地提高现有算法的工作效率。3)现有的基于特征点法的视觉里程计算法,对每个输入图像都会进行关键点提取和描述子的计算,相邻图像之间基于特征点匹配来确认彼此之间的相对运动关系。同时,只有关键帧的描述子才会用于位置识别,对于大量普通图像的描述子是无效的。因此,本文提出了一种基于灰度不变性假设的快速跟踪策略,避免无效且耗时的描述子计算。同时,限制后端地图优化问题的规模,对地图数据及时进行历史缓存与推送,避免了本地存储量与计算量的激增。4)针对轻量级设备无法长时间缓存和维护大量的地图数据问题,本文结合边缘计算思想,提出了一种基于端边协同的地图构建方法。具体地,包含可靠的端边通信机制,位置识别和地图融合方法,解决因相机共视导致的地图数据冗余问题。本文以树莓派4B作为轻量级研究设备,并且基于KITTI Visual-Odometry和TUM Visual-Inertial数据集对本文方法开展综合性的实验。实验表明,本文方法相比于主流的视觉SLAM方法,算法的实时处理效率明显提高,端边协同机制能有效降低端设备的负载要求,同时也促进了设备之间的地图数据实时共享与融合,为开展大规模场景下的地图构建提供了有效的解决方案。
其他文献
随着人工智能技术与产业链的快速发展,双足机器人已经越来越多的出现在我们的日常生活中,在许多领域都发挥着巨大的作用。双足机器人性能的优劣在一定程度上取决于控制系统的优劣。因此,研究和设计双足机器人控制系统具有重要意义。本文旨在针对基于准力矩电机驱动的高性能双足机器人原理样机,设计出一套通用的实时嵌入式控制系统,实现双足机器人的基本控制功能,并在双足机器人原理样机上进行验证。本文的主要研究内容如下:(
学位
随着新一代人工智能的兴起和工业4.0概念地提出,注塑智能化在显著的提升,在注塑工厂进行智能工厂的转型过程中,注塑件制品的自动质量检测是其中必不可少的一环,传统的注塑件检测都是通过人工检测,这种方式效率低下,产品稳定性也无法得到保证。实现注塑件制品的自动化质量检测可以提高检测效率、降低人力成本、提高生产效率。随着工业智能化、自动化的发展,基于机器视觉算法在注塑件缺陷检测中得以应用;但是因为需要研究人
学位
近年来,随着电子商务的快速发展,网购在人们日常生活中扮演着越来越重要的角色。然而随着电商网站的商品不断增加,用户发现越来越难找出感兴趣的商品。因此如何设计推荐系统,帮助用户从海量商品中挑选出感兴趣的商品,逐渐成为当前学术界与工业界热门的研究方向。传统的推荐系统采用静态方式对用户交互信息进行建模,只能捕捉到用户静态的兴趣偏好。不同的是,基于用户行为序列建模的推荐系统能够捕捉到用户动态的兴趣偏好。为了
学位
随着自然语言处理技术的快速发展,融合人工智能的人机交互服务也逐渐在互联网上变得多元化。人与计算机的交互不仅局限于简单的计算机指令传输,计算机还可以通过文本或语音等媒介与人进行互动。开放域对话系统作为自然语言处理技术在人机交互中的重要应用,旨在与人进行不限主题内容的对话交互,由于其广泛的应用场景,在近年来已成为人们的研究热点。人类进行交流的语言信号包含语序、语义等语言规则以及情感等隐含表达。现阶段的
学位
随着深度学习理论技术的不断完善与发展,计算机视觉在日常生活中的应用也越来越多。人数统计任务作为计算机视觉领域重要的研究方向之一,也逐渐影响着人们的生产生活。如对于疫情防控,通过统计公共场合的人数如会议厅、车站、教室等场合对疫情防控起到了重要作用。在人流量管控方面,通过对固定区域过往人流量的分析可以给出行人员提供更加可靠的出行策略。本文通过对国内外人数统计方法的研究和分析,分别基于目标检测算法和目标
学位
伴随着无线通信技术的迅猛发展,5G技术也迎来更加广泛的应用,越来越多的设备可以通过无线技术接入到互联网,基于5G技术的万物互联也变成了可能。然而,无线通信业务快速增长的同时也导致对频谱需求的急剧增加。发射功率作为重要的无线通信资源,一种有效的功率控制方法不仅能够提高频谱资源的利用率,还能提高用户的通信服务质量(Quality of Service,Qo S)。深度强化学习在近年得到了很大的发展,它
学位
当前,利用计算机视觉分类算法辅助医生诊断阿尔兹海默症已经成为较高效的诊断方式。对于阿尔兹海默症病灶分类任务而言,最具有挑战的是在大脑类别下精准区分患者MRI与正常衰老MRI之间的差异。一般地,在区分一些具有类间距离小类内距离大的特点的图像时,通过细粒度算法可以捕获到这些图像之间的细微差异,使得模型在某一大类下找到各个子类中具有区分性的区域。因此,有研究者发现将该算法运用在医学图像识别任务中可一定程
学位
随着我国社会人口老龄化日益加重,老龄群体对家庭医疗护理服务的需求不断提高。家庭护理路径规划与调度问题作为家庭医疗护理服务中一个具有挑战性的问题。然而,现有研究大多考虑老人的服务需求是否满足、服务是否及时、老人对服务是否满意等因素,却忽略了老人在选择护理人员上的预算和偏好习惯。因此,综合考虑上述因素,如何设计有效的护理资源调度方法,对降低家庭护理机构的运营成本以及提高行动不便的老人群体的医疗服务质量
学位
随着互联网技术以及社会经济等的高速发展,文档图像数量激增。计算机文档分析在纸质文档电子化、内容识别、内容检索等领域具有广泛的应用。近年来随着教育信息化的不断推进,智能教育成为国家的重要战略之一。新冠疫情下社会对智能在线教育的迫切需求,使得对教科书、习题册等文档的自动分析成为研究的热点。文档版面分析是指根据文档图像中不同区域的语义功能对文档进行区域分割并识别区域类别,是文档分析的关键步骤。其次,面向
学位
近年来,随着网络技术的提升及多媒体数据的爆炸性增长,这使得我们在现实生活中要面对的数据量越发庞大。同时,我们目前的需求不再满足于单一模态数据的相似性检索,而是多模态数据间的相互检索,即跨模态检索。而哈希技术的出现大大降低了检索时间与存储成本,因此在近年来也引起了广泛的关注与应用。经过多年的研究,跨模态哈希技术尽管有了不小的进展,但仍然存在着一些问题需要解决。例如大多数有监督哈希方法仅仅将标签信息转
学位