使用深度学习构建关键点提取器与深度估计模块的视觉SLAM

来源 :广西大学 | 被引量 : 0次 | 上传用户:chmwingflying
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
即时定位与地图构建(Simultaneous Localization And Mapping,SLAM)是指搭乘特定传感器的主体,在没有环境先验信息的情况下,于运动过程中建立环境的三维模型,并估计自己的运动。经过多年的发展,SLAM在自动驾驶、增强现实、机器人运动与定位等多个领域中慢慢显示出它的作用。其中,基于特征点法的视觉SLAM具有使用方便、传感器成本较低等优点。这些优点使得基于特征点法的视觉SLAM受到了广泛关注,具有较好的应用前景。在传统的基于特征点法的视觉SLAM系统中,所有运算均由CPU完成,没能完全利用现有的硬件资源进行加速(如GPU);其次,系统所使用的特征点提取算法均是人为设计的具有较强假设的图像特征点提取算法,导致当系统运行在纹理单一的环境时,路径估计的精度大幅度下降,甚至无法进行估计。本文就此问题展开研究,借助近年来为计算机视觉带来巨大发展的深度学习(Deep Learning,DL)技术,尝试解决传统的基于特征点法的视觉SLAM系统的关键点提取与固有的尺度问题。主要工作如下:提出使用自监督光流关键点提取器的SP-Flow SLAM系统。本文利用自监督学习来构建关键点提取器,该关键点提取器能够提取视觉SLAM所需的特征点。首先利用卷积神经网络和合成数据训练出能够提取关键点的基础网络;然后,利用连续两帧图像和光流算法对基础网络进行训练,获得一个能够提取良好配对关键点的实时推断网络SP-Flow;最后,将SP-Flow网络作为关键点提取器的核心模块,应用到基于特征点法的视觉SLAM系统,得到SP-Flow SLAM。实验结果表明,SP-Flow SLAM提高了传统基于特征点法的视觉SLAM的路径估计精度,并在一定程度上保证了系统运行在低纹理环境中的鲁棒性。提出使用自监督几何信息深度估计模块的SPD-Flow SLAM系统。在使用单目传感器的情况下,基于特征点法的视觉SLAM由于无法正确估计出二维图像中的三维信息,因此会出现固有的尺度问题。为克服运行在单目模式下的视觉SLAM系统的尺度问题,本文在SP-Flow SLAM的基础上,利用自监督学习和几何信息来构建一个深度估计模块。首先,通过几何信息训练出一个能够估计场景深度的教师网络;然后,使用知识蒸馏对此教师网络进行简化,得到一个规模较小的学生网络,且该学生网络能够完成教师网络的功能;最后,将学生网络作为深度估计模块的核心部分,融入到SP-Flow SLAM之中,得到SPD-Flow SLAM系统。实验结果表明,本文所提出的SPD-Flow SLAM系统保留了SP-Flow SLAM的优势,并改善了SP-Flow SLAM在单目模式中的尺度问题。
其他文献
背景:我国儿童支气管哮喘患病率逐年升高,婴幼儿反复发作喘息可能是支气管哮喘的早期临床表现,是诊断婴幼儿哮喘的起始点[1]。目前临床诊断婴幼儿哮喘主要依据患儿临床特征和既往病史,若不能准确诊断和早期识别,或者治疗不规范都可能会延误诊断和治疗。研究表明[2],约50%的儿童在学龄前有过一次喘息,60%的喘息患儿在6岁后不再发作,但部分儿童喘息会持续存在,最终发展为支气管哮喘。早期反复喘息可能会使患儿的
学位
当今世界,随着经济的发展,科技的进步,计算机系统的规模逐步增大,系统发生故障的概率也随之增长。因此,保护系统的可靠性和安全性变得越来越重要。促使系统可靠性提高的一个重要手段是当系统发生故障后,能够采用有效的诊断算法对系统中故障快速定位,并且能够准确地判断出系统故障集,以便使程序员和维护人员能尽快对故障的地方进行修复,使系统恢复到发生故障之前的正常工作状态。系统级故障诊断是检测系统故障的一种有效方法
学位
背景:妊娠期高血压疾病(Hypertensive disorders of pregnancy,HDP),包括妊娠期高血压(Gestational hypertension,GH)、子痫前期(Preeclampsia,PE)、子痫、慢性高血压合并妊娠及慢性高血压合PE,是一组妊娠期女性特有且常见的疾病,发病率约10%。该组疾病严重影响母儿健康,是母儿就诊的重要原因之一。同时,HDP可导致孕妇远期并
学位
背景和目的:男性尿道狭窄是各种原因导致的尿道管腔减小。其主要表现是排尿困难,并可能出现包括尿潴留、充盈性尿失禁、尿道周围感染、慢性肾功能衰竭等一系列并发症。硬化性苔藓(lichen sclerosus,LS)目前被认为是导致男性前尿道狭窄的一重要原因。LS是一种T淋巴细胞介导的慢性疾病。目前对该病病因认识不足,其主要表现是病变区域粘膜萎缩变薄、色素缺失、瘢痕挛缩等,如不及时就诊,病变可逐渐侵犯男性
学位
第一部分:急性心肌梗死后室间隔穿孔患者短期死亡危险因素及不同治疗方法分析。目的:研究急性心肌梗死后室间隔穿孔(PIVSR)患者的临床特点、短期死亡的危险因素及不同治疗方法对预后的影响。方法:回顾性分析2013年1月1日至2019年12月31日在河南省人民医院心脏中心确诊为PIVSR且符合入选条件的患者共112例,收集患者的临床资料、入院时生命体征、心电图、超声心动图等资料。根据短期内(2周)是否存
学位
背景与目的多发性硬化(MS)、视神经脊髓炎谱系疾病(NMOSD)、抗髓鞘少突胶质细胞糖蛋白免疫球蛋白G抗体相关疾病(MOGAD)是三种常见的中枢神经系统特发性炎性脱髓鞘疾病(IDDs),虽然三者的病因和发病机制不尽相同,但临床症状和影像学表现常有重叠,加之MS和抗体阴性的NMOSD缺乏特异的实验室诊断标志物,因此临床诊断常面临挑战,本研究旨在分析三种疾病的临床特征,为减少临床误诊、漏诊提供循证医学
学位
随着生物信息学的不断完善和发展,下一代测序技术的出现从根本上改变了种群遗传学、分子数量遗传学、微生物生态学等众多生物学领域的研究方式。蛋白质作为人类细胞中及其重要的分子,随着其结构和功能的不断深入,越来越多的学者致力于对未知蛋白的研究。DNA结合蛋白是蛋白质与DNA结合形成的复合物,其主要功能是组织和压缩DNA以及调节和影响各种生物细胞过程,如转录、重组、修复和修饰等。此外,研究DNA结合蛋白识别
学位
随着信息技术飞速的发展,信息技术已经在医疗、军事和司法等领域有着广泛的应用。越来越多的个人或者组织使用互联网进行传输数据,这些数据中包含了很多机密信息。然而科技是一把双刃剑,先进的信息技术同样可能被信息窃取者用于窃取用户的机密信息。频频发生的信息泄露事件,使信息安全逐渐成为大众关注的焦点。在过去,解决机密信息泄露问题的机制主要基于密码学。但是基于密码学的数据加密只是把数据加密为不可读的乱码,这些乱
学位
随着代谢数据库的发展,进一步探索代谢网络成为可能,面对庞大的代谢数据,需要新的计算方法来寻找具有生化性意义的代谢路径。在代谢网络中,分支路径由线性路径构成,相对于线性路径,分支路径可以刻画更为完整的代谢过程。现有寻找分支代谢路径的方法主要通过追踪原子来寻找分支路径,这需要使用者定义被追踪的原子。此外,为了缩减搜寻线性路径和分支路径的空间,现有追踪原子的寻路方法仅通过合并那些在分支点和目标化合物上没
学位
背景与目的:尿道狭窄是泌尿系统常见病,多见于男性,主要表现为尿线变细、排尿费力、尿滴沥等排尿困难症状,随病情进展可能出现尿潴留、充盈性尿失禁、慢性肾功能不全等一系列并发症。其发病率约为0.3%,全球不同地域尿道狭窄的发病率及狭窄部位有显著性差异。国外每年约150万人因尿道狭窄就诊,约5000人需住院手术治疗,我国尚无大数据统计。根据前尿道的解剖,将前尿道狭窄分为尿道外口、舟状窝部尿道、阴茎段尿道及
学位