基于深度学习的稀疏三维重建关键技术研究

来源 :桂林电子科技大学 | 被引量 : 0次 | 上传用户:liongliong462
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多视图三维重建由于仅以多视角图像作为输入,具有成本低、操作简单、实时性高等特点,因此在视觉定位导航、无人车环境感知、测绘等领域具有广泛应用。稀疏三维重建作为其中重要环节,关键是实现相机位姿参数估计以及稀疏场景结构恢复,现有相关技术的主要发展趋势有:一方面,传统特征点检测及匹配算法性能已经很难大幅提升,同时传统位姿估计算法往往需要反复迭代以剔除误匹配点对的干扰而导致效率较低;另一方面,随着深度学习在计算机视觉中的深入应用,越来越多的研究人员着眼于将深度学习技术应用于三维重建领域,期望在精度和效率上较传统算法都有进一步的提升。基于传统稀疏三维重建关键技术的局限性以及研究趋势,本文利用深度学习算法,针对稀疏三维重建中的稀疏特征匹配和相机相对位姿估计进行研究,主要内容包括以下三方面:(1)针对SuperPoint特征检测网络只能提取像素级特征点的问题,将SIFT检测的亚像素特征点与Super Point特征描述相结合,改进SuperPoint的特征点精度同时保留其强大的特征描述能力,最后结合Super Glue特征匹配网络实现多算法融合的高性能稀疏特征匹配。该方法获得的匹配点对数量是SIFT匹配算法的2.04倍,且对称极线距离≤10-4的匹配点对比例较SIFT匹配算法提高了7.2%。(2)针对匹配结果中不可避免地存在误匹配点对的问题,基于OANet网络设计了一个用于误匹配点对剔除的匹配点对分类网络。使用该网络对本文多算法融合的稀疏特征匹配算法在DTU测试集上的匹配结果进行分类,内点比例提高了8.3%。(3)针对结合RANSAC的传统相机相对位姿估计算法效率较低的问题,设计了一个以匹配点对作为输入,以6参数的相机相对位姿为输出的相机相对位姿参数解算网络。在匹配点对分类网络筛除误匹配点对的基础上使用该网络估计相机相对位姿,速度较传统算法提高了1.9倍且具有更小的误差,与现有基于像素语义特征的深度学习算法相比平均平移误差降低了2.271°以上。最后基于本文算法获得的相机相对位姿参数在已知相机内参的DTU数据集上进行了左右影像稀疏三维重建测试,获得的稀疏三维点云重投影误差的均值和方差均低于文中所列其他算法。
其他文献
随着我国隧道建设进入快速期,隧道日常检测的需求量逐步提升,人工检测裂缝的方法已经无法适应当前高效、准确的检测需求。利用图像处理技术对隧道裂缝进行识别,已经成为隧道智能化检测一个重要的发展方向。在此基础上,本文设计一种基于改进Faster RCNN和传统图像处理的隧道裂缝自动检测系统,通过增强算法提高目标区域对比度,搭建改进Faster RCNN网络对增强图像进行裂缝识别和定位,使用提取算法对识别出
学位
<正>"落一叶而知秋,窥一斑而知全豹"。透过高三工作管理窗口,基本能感知一所学校管理的概貌。高三工作管理涉及目标与过程、教师与学生、德育与教学、常规和教科研等诸方面的管理。而一切管理的出发点和落脚点都是提高课堂教学效益。高三的课堂精彩了,师生的综合素质或终端结果想不精彩也难。一、抓备课,突出规范充分备课是上好课的前提,高三教学更是如此。上世纪八十年代参加工作的老教师很难忘却,当年第一次执教高三时的
期刊
随着电子工业技术的快速发展,对于电路系统检测及诊断的相关课题研究得到了高度重视。模拟电路集成度很高,如果出现问题就会致使电路系统无法正常工作。再加上其具有十分明显的非线性及容差性等特征,如果利用常规的诊断手段与原理是无法满足故障诊断的需求的,故而对更加合理的模拟电路故障诊断技术展开探索具有十分重大的现实意义。本文主要基于极限学习机(Extreme Learning Machine,ELM)、自动编
学位
人工智能、大数据等技术的飞速发展,使得电子系统的复杂度呈指数型增长,电路健康状态检测成为系统安全运行和合理维护的根本保障。由于元件的容差特性,模拟电路容易发生软故障,给系统健康检测带来很大的挑战。因此,开发高效的模拟电路故障诊断技术成为电子系统健康检测的必然选择。传统的故障诊断方法主要基于机器学习算法,该方法需要手动提取特征,且难以获得电路信号的深层特征信息。深度学习算法具有自动完成特征提取与分类
学位
石油、制药等工业废水中含有大量的苯酚及其衍生物,会对微生物产生毒性抑制作用,难以通过常规的活性污泥法进行处理。生物强化技术是通过纯化菌种、促进关键基因表达的方式提高微生物效能,从而促进难降解物质被微生物降解的技术,具有高效性、成本低等优点,已经逐渐被应用于降解酚类物质、多环芳烃等研究上。本试验以苯酚为目标污染物,选用乙酸钠作为基质,通过生物强化中的生物共代谢技术促进好氧活性污泥对苯酚废水的降解,同
学位
<正>近日,第十三届全国人民代表大会常务委员会第三十二次会议审议通过了《中华人民共和国种子法》修改决定,将于2022年3月1日起正式实施。这是种子法自2000年颁布以来的第四次修改。在种业振兴开局之年,此次种子法修改的背景和重点内容有哪些?为此,相关专家做出权威解答。问:为何要再次修改种子法?答:修改种子法是新形势下立足我国发展实际、着眼未来发展需求,
期刊
为解决对SoC中嵌入式仪器测试时的访问难题,IEEE 1687测试标准采用可重构扫描网络结构实现对复杂芯片系统内嵌入式仪器的访问与测试,并定义仪器连接语言(ICL)对仪器相关信息以及它们之间的连接链路进行了描述。根据ICL脚本的描述可以分析得到扫描网络,从而选择最优测试链路实现对仪器的访问测试。但现代So C日益复杂化,当前构建扫描链路的方式已无法满足现代测试的需求,难以实现对嵌入式仪器快速的访问
学位
偏振成像是一种先进的光学成像探测技术,在获取强度图像的同时,还能获取目标的偏振信息。在目标探测和识别领域有着重要的应用。空间调制全偏振成像是一种新型的同时全偏振成像技术,基于偏振的Stokes理论将目标的全Stokes参数(S0、1S、S2、S3)图像在空间上调制耦合成单幅干涉图。该方案在原理上可以实现快照式偏振成像,相应的仪器紧凑,性能稳定,有着很好的应用前景。本文的主要内容如下:1)针对空间调
学位
光学涡旋(Optical Vortex)是一种结构光场,其传输波前呈螺旋分布,具有轨道角动量(Orbital Angular Momentum,OAM)。光学涡旋携带的OAM具有模式正交性,且作用于微小粒子上可以转为机械扭矩,因此可以应用于光通信和光学操纵中。此外,光学涡旋的旋转多普勒效应和环形强度分布可以应用于旋转体探测、光开关和超分辨率显微成像等技术中。然而,光学涡旋相关的光子器件往往依赖于复
学位
电磁离子回旋波(Electromagnetic ion cyclotron waves,EMIC波)与地球空间环境紧密相关,在磁层动力学过程中起着至关重要的作用。本文采用Swarm卫星高精度磁场数据和等离子体密度数据,系统地研究了电离层EMIC波的时空分布和传播特性并对相应的物理机制进行探讨,得到了如下的结论:1、基于Swarm卫星的高精度磁场数据,本文对2015年3月17-25日磁暴期间中纬度电
学位