基于深度学习的水下三维场景重建

来源 :江苏科技大学 | 被引量 : 0次 | 上传用户:dfjixie2010
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
水下三维场景重建技术广泛用于海洋资源勘探、海底管道检修、海洋环境监测等领域。光线在水下传播的复杂性使得水下成像设备采集到的图像质量严重降低,给各种科研工作带来了巨大的阻碍。深度学习基于数据驱动具有优秀的数据拟合能力,相比于基于各种先验知识的水下图像增强模型,深度学习方法能够自动统计水下图像数据潜在的分布规律,在合理的损失函数下自动完成水下图像的增强过程,给后续的三维重建提供丰富的场景信息,因此研究基于深度学习的水下三维场景重建具有重要的理论意义和应用价值。本论文基于光视觉系统,对水下成像设备拍摄到的三维场景进行图像增强并提取水下场景的关键点特征,利用运动恢复结构技术估计水下成像设备的位置和姿态信息以及水下三维场景的稀疏点云结构,并采用立体匹配技术获得图像的深度信息和视差信息,从而实现水下三维场景的稠密重建。主要研究工作如下:(1)在分析水下图像的成像原理以及造成水下图像退化原因的基础上,针对水下图像颜色偏差较大的问题,提出一种基于卷积神经网络的水下图像颜色校正和纹理增强算法。采用U-Net++网络对水下图像进行RGB特征提取,并将其转成HSV特征输入颜色调整网络进行训练以校正图像的颜色偏差,且在模型的训练过程中加入全变差损失函数以增强图像的纹理细节,然后将颜色校正后的HSV特征恢复为RGB特征并使用注意力机制和U-Net++输出的RGB特征进行融合得到增强后的水下图像。最后,进行对比实验以验证本论文算法的有效性。(2)在分析相机成像模型的基础上,推导相机坐标系、像素坐标系以及图像坐标系之间的关系式并总结相机的标定过程;分析相机畸变模型,将畸变系数加入似然函数优化相机的内参和外参的标定。(3)在分析两种典型图像尺度空间构造方法的基础上,针对线性滤波构造图像尺度空间会造成的图像边缘信息丢失等问题,采用基于非线性扩散滤波构造图像尺度空间的方法,并且在AKAZE特征检测的基础上引入局部敏感哈希的近似最近邻算法加速特征点的匹配过程,然后使用运动恢复结构技术获取相机的运动信息和三维场景的稀疏结构,最后进行验证性实验。(4)结合运动恢复结构获得的相机位姿和稀疏点云进行全局视角的选择,从图像数据集筛选出特征点数量丰富、分辨率相似以及基线较宽的图像用于立体匹配,分析了立体匹配的过程中基于极线搜索的视差估计技术和基于Patch平面扩散的视差估计技术。经过实验验证,基于Patch平面扩散的视差估计方法相对于基于极线搜索的视差估计方法产生的视差图更加光滑,没有出现大量的不连续视差区域,因此本论文选用基于Patch平面扩散的方式用于水下三维场景的重建。(5)设计水下三维场景的重建系统,并进行相关实验以证本论文工作的有效性。
其他文献
晶体蛋白(crystal protein, Cry)毒素是苏云金芽胞杆菌(Bacillus thuringiensis, Bt)分泌的主要杀虫蛋白,其中Cry4Ba和Cry11Aa对埃及伊蚊(Aedes aegypti)幼虫具有特异的毒杀活性。Cry毒素作用于昆虫肠道上皮细胞需要细胞膜受体的介导,而昆虫肠道的免疫应答因子通过识别Cry毒素,进而驱动免疫系统抵御毒素的侵染。为了系统探究Cry4Ba和
在西方社会现代化发展过程中,伴随社会分化和价值领域分化,艺术、审美获得了独立自律的现代意义。现代艺术教育思想在此基础上确立并形成。在关乎人性健全、自由的意义上,进一步提升了艺术教育的地位,使之成为现代教育结构中独立而必要的组成部分,进一步由专业教育拓展融入普通教育,在人类教育结构中发挥基础而本质的作用。
本文以口述历史纪录片为研究对象,探究口述历史纪录片中历史真实与艺术真实、叙事建构以及视听表达三个方面对历史真实的影响,从而为口述历史纪录片的创作提供更多的思考。本文结合毕业作品《搬迁》的创作过程,以口述历史的操作规范为理论指导,从五个部分来探讨口述历史纪录片真实性的建构。第一章绪论部分主要就口述历史纪录片真实性问题的研究界定以及相关研究现状和存在的问题进行阐述总结。第二章围绕口述历史纪录片历史真实
科举是一种朝廷开设科目,士人可以自由报考,主要以考试成绩决定取舍的选拔官员的制度。科举制度创始于隋,确立于唐,完备于宋,而延续至元、明、清,前后经历了1300年之久。它在中国历史上起过重大的作用,有过广泛的影响。
青藏高原地区气候变暖、冻土融化造成水土流失及土壤质量下降,明确青藏高原土壤质量年代际变化状况,是科学认识该地区土壤资源的基础,是植被恢复和生态重建的关键所在。本研究选取1980s和2020s青藏高原南部土壤有机质(SOM)、全氮(TN)、全磷(TP)等8项指标,通过计算土壤质量指数(SQI)对山地针叶林地带(西藏自然地理分区Ⅱ区)和山地灌丛草原地带(Ⅳ区)土壤质量进行了评价,采用变差分解(VPA)
针对现有深度学习方法计算非刚性点云模型间稠密对应关系时精度不高,且算法泛化能力较差的问题,提出一种基于特征序列注意力机制的无监督三维点云模型对应关系计算新方法。首先使用特征提取模块提取输入点云模型对的特征;然后通过Transformer模块捕获自注意力和交叉注意力来学习共同上下文信息,并由对应关系预测模块生成软映射矩阵;最后重构模块根据得到的软映射矩阵重构点云模型,并利用无监督损失函数完成训练。在
<正>把握新发展阶段、贯彻新发展理念、构建新发展格局,是以习近平同志为核心的党中央统筹中华民族伟大复兴战略全局和世界百年未有之大变局,与时俱进全面建设中国社会主义现代化强国的战略抉择。习近平总书记在2019年中央经济工作会议上的讲话中指出:“新时代抓发展,必须更加突出发展理念,不能笼统、简单、概念化地大喊发展口号。我国仍处于并将长期处于社会主义初级阶段,实现第一个百年奋斗目标进而为实现第二个百年奋
期刊
<正>1引言在全球卫星运营商规模建设Ka卫星网络的时候,运营商通过提供漫游服务,既能够让本网用户突破地理位置限制,延续和提高用户体验,同时也可以通过为漫游伙伴的用户提供服务,来增加网络的收入,实现运营商之间的共赢。因此卫星运营商之间的网络漫游服务具有很高的实用价值。作为中国唯一拥有通信卫星资源且自主可控的卫星通信运营企业,中国卫通运营管理着14颗卫星,
期刊
河南省三门峡市官寨头村第四批被列入我国传统村落名录,其黄土台塬地貌独具特色。将官寨头村的非物质文化遗产及民俗文化进行保护和展示,使传统文化逐渐呈现在大众视野,对文化传承起到了很好的宣传效果。同时,在建筑提升的基础上,结合周边环境,利用独特的地域特征打造文化空间,以改善景观形态。本文对三门峡市的窑洞建筑进行分析研究,在保留原有建筑风貌的基础上,以展览馆的形式对箍窑遗址进行保护、提升再设计,以期为同类