弱纹理区域的无人机影像快速三维重建方法研究

来源 :长安大学 | 被引量 : 0次 | 上传用户:chenhonghongshi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年来随着无人机(Unmanned Aerial Vehicle,UAV)的普及,以及数据处理技术的成熟,无人机被广泛应用于灾害风险管理、精准农业、智慧城市、文物保护、测绘、电力巡检、VR/AR等各个领域。利用无人机影像进行大规模三维重建具有价格低廉、模型精细的优点,尽管目前三维重建技术已经很成熟,但是仍然存在一些难点问题。比如在弱纹理区域和重复纹理区域重建困难,在SFM(Structure from Motion)和密集匹配过程都很难匹配到同名点。同时密集匹配是三维重建过程最耗时的部分,目前的商业软件(Photo Scan、Context Capture、Pix4d)和开源软件(Colmap、OpenMVS、CMVS/PMVS)很难满足一些场景对效率上的需求。本文围绕弱纹理区域的无人机影像快速三维重建方法展开研究,针对现有的三维重建方法存在效率低下、弱纹理和重复纹理区域处理能力不足的问题,进行了一系列深入的研究工作,并在三维重建的不同阶段,给出了一些解决办法。(1)在进行SFM之前,需要进行特征点的提取与匹配。特征点提取与匹配的结果以及估计的初始相机位姿的准确度是决定SFM成败的关键因素之一。在弱纹理区域,视觉探测的特征点极少,同时匹配困难。而基于深度学习的特征提取方法在弱纹理区域表现均超过传统方法,在效率上也是最快的。本文将SFM前端特征提取部分分别替换成基于深度学习的方法superpoint、r2d2和传统方法sift,均采用最近邻匹配方法进行特征匹配,然后进行SFM重建。最后分析比较了不同特征提取方法SFM重建点云的精度和完整度,以及相机位姿估计的精度。(2)在密集匹配阶段,针对弱纹理和重复纹理区域重建困难问题,采用一种平面约束下的金字塔Patch Match多视密集匹配方法。通过加入金字塔由粗到细的优化方式,不仅能够提供更优的初值,以便以更少的传播次数得到较好的深度结果。同时在低分辨率上同样大小的窗口有更大的感受野,对弱纹理和重复纹理区域的重建效果有改善。在此基础上,弱纹理区域往往都是平面结构,例如建筑的表面、道路表面等等,在金字塔patchmatch算法基础上加入平面约束可以进一步改善弱纹理区域的重建效果。本文在最后加入了深度图后处理步骤,来进一步滤除密集匹配阶段产生的噪声点,后处理步骤包括小联通区域的去除、空洞填充以及中值滤波。(3)最后在GPU平台上对提出的密集匹配方法进行加速,分别对深度图生成和深度图融合部分进行加速。在深度图生成部分,传统的Patch Match算法采用的是顺序传播的方式,例如开源软件Colmap和OpenMVS均采用了顺序传播的方法,该传播方式并不适合多线程并行计算。本文采用了对称红黑棋盘格的传播方式,该传播方式充分利用了GPU的大规模并行计算能力。最后深度图融合部分,本文采用了OpenMP技术在CPU平台上实现了加速。
其他文献
随着我国社会经济实力不断提升,对各行业生产建设项目有着更高的要求。作为我国经济发展中的支柱产业,能否顺利推进建筑工程产业显得极为重要,其中安全管理工作作为保障建筑工程顺利进行的关键因素,必须给予足够的重视。因此,主要对建筑施工中建筑安全施工管理策略的应用进行简要分析,为建筑行业的发展做出贡献并提供借鉴。
期刊
工业物联网作为全球工业体系智能化改革的重要推手,中国战略性新兴产业的重要组成部分,正在逐步改变人们的生产方式,能够直接通过网络访问智能设备收集的数据。然而,由于用户在公开信道完成远程访问和数据传输,如何确保用户合法性和数据安全性成为制约工业物联网发展的重要因素。认证密钥协商技术的提出不仅实现了用户认证,而且能够协商会话密钥,为数据的安全传输提供保证。因此,研究工业物联网环境下的认证密钥协商具有重要
学位
我国矿区土壤重金属污染较严重,获取土壤重金属污染的空间分布是十分必要的。随着遥感技术的发展,利用星载影像开展大范围土壤重金属污染调查与监测成为一种有效的手段。但是,利用国产星载高光谱影像进行土壤重金属反演的研究仍较少,且由于土壤重金属含量反演问题的复杂性,其反演精度有待提高。另一方面,由于重金属含量监测的周期性,如何利用历史数据减少土壤样本采集的成本,提高作业效率,也是需要研究的问题。因此,本文以
学位
<正>《小学礼乐文明教育》是在清华大学中国礼学研究中心和海淀区教科院、海淀敬德书院的共同努力下编写完成的。清华大学礼学中心主任彭林教授师承史学界著名专家赵光贤先生,治学严谨,文风笃实,对儒家三礼之学研究用力颇多,特别关注当下礼学重建。本书内容与小学生日常生活紧密结合,设"何为礼""何为乐""饮食之礼""起居之礼"等条目,涉及礼乐的起源、礼乐的特点、日
期刊
《共产党宣言》(以下简称《宣言》)是一个自觉地保持了开放性的著作,七篇序言的撰写是其具体化体现,二者之间是母体与子体之间的关系,它们互为补充、相互成全。《宣言》为序言的撰写提供了基本原理与方法论基础,序言则交代了《宣言》作为历史性文本与现实社会的密切关联,反思了在不断展开的历史环节中共产主义革命运动的新发展。序言蕴含的共产主义思想彰显了人民逻辑的优越性与战胜资本逻辑的必然性。文章将《宣言》序言作为
学位
驾驶模拟器技术在车辆设计,高级辅助系统(ADAS)开发以及道路安全研究等领域能够有效缩短研发周期,降低试验成本和危险系数。转向系统作为驾驶模拟器的重要组成部分应该具备路感模拟功能。路感是模拟器通过力执行机构提供给驾驶员的方向盘转向阻力矩,真实的路感有助于提高驾驶模拟器的使用效果。因此,路感模拟对驾驶模拟器开发具有十分重要的意义。本文依托于课题组的驾驶模拟器项目,对驾驶模拟器转向系统路感模拟和控制策
学位
青藏高原生态环境对气候变化的响应是全球变化研究关注的重点问题。地表风化与气候变化之间具有紧密的联系,因此对冰川流域硅酸盐岩风化以及黄铁矿氧化进行定量研究可为理解高原气候变化提供关键性认识。本文以青藏高原北部祁连山典型冰川流域—老虎沟流域为研究对象,通过分析流域河水及降水的水化学和氢氧同位素,研究了冰川径流来源,河流溶质来源以及水文条件对溶质的影响,流域化学风化速率以及黄铁矿氧化对化学风化碳汇效应的
期刊
未爆弹主要是指战争或其他的军事活动后遗留下来的尚未被引爆的弹药,这些钻入地下的未爆弹通常散布于地下极浅位置、情况复杂、危险性高,妨碍土地开发与使用,严重危害人民的生命和财产安全。此外,当今世界持续不断的局部战争遗留下大量的未爆弹,一般来说,这种未爆弹的影响都会持续几十年,因此探测和排除这些未爆弹是具有非常重要的现实意义。本文首先调研了国内外探测未爆弹相关方法、技术及装备的基础上,分析总结了利用低空
学位
本文探讨了人工智能在信息化测绘中的应用及其意义,重点分析了人工智能在测绘数据处理、结果优化、数据管理和安全等方面的应用。通过利用人工智能技术实现测绘数据的自动化处理、分析和可视化等,可以提高数据的质量和可靠性,同时也可以在数据管理和安全方面提供更好的保障。本文结合现有的研究成果,探讨了未来信息化测绘在人工智能背景下的发展方向和思考。在不断变化和创新的需求下,进一步探索和研究新的技术和方法,将有助于
期刊
<正>随着社会的发展,人们对美的追求越来越高,小阴唇整形也逐渐受到人们的关注。尽管小阴唇整形术方法有很多,但手术指征、手术方式选择、围术期管理及术后并发症防治等缺乏统一的标准[1-2]。中国整形美容协会女性生殖整复分会组织专家,根据文献报道[3]和专家经验,经过反复的讨论和修改,对小阴唇整形术提出如下共识,以期为临床医生对小阴唇肥大的诊治及整形决策提供参考及借鉴。
期刊