基于代价体金字塔的多视图立体重建研究

来源 :云南大学 | 被引量 : 0次 | 上传用户:shopfloor
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于图像的三维重建是从一幅或多福二维图像中推导出物体和场景的三维几何结构,因成本低廉、数据易于获取、真实感强、自动化程度高等优点,在计算机视觉和计算机图形学领域成为研究热点和难点。本文提出一种基于代价体金字塔的多视图立体重建系统,对多视图立体重建的关键步骤进行研究与改进。(1)由于基于循环算法的多视图三维重建是置换变体,即相同图像的不同排列重建的3D形状可能会不相同,因此本文在特征提取阶段加入一个注意力聚合模块AttSets。基于AttSets的特征提取具有置换不变性,能够学习融合来自所有图像的信息,从而实现更好的聚合性能。(2)得到提取的特征后,本文考虑到构建代价体内存和时间问题,采用代价体金字塔的结构迭代优化构建代价体。由于深度图采用残差迭代的方式构建,初始深度图的错误会传播到后一层,导致最终的重建效果不是很理想。本文在金字塔迭代第一层加入深度法向量一致性来细化初始深度图,使最终的深度图具有较强的连续性。(3)近年来,在基于深度残差网络的多视图立体重建算法中,损失函数主要是使用逐像素损失,但光照、图像的平移等因素都会导致像素变化,仅使用像素损失会输出一个大的误差值,因此本文加入除像素损失外的特征损失,使模型训练尽量最优化。本文在专门对MVS重建建立的DTU数据集上进行训练和测试。为了证明算法的泛化能力,还在Tanks and Temples和自采数据集上对算法进行了测试。测试结果与基于传统方法和基于深度学习的方法进行对比,实验结果表明,本文的算法在完整性上取得了最优结果,算法能够完整的重建出场景,且重建的场景质量更好。除此之外,本文为找到算法最优的匹配数量、最优的代价体金字塔层数以及像素深度间隔做了对别实验,实验结果表明,视图数、代价体金字塔层数和像素深度间隔对重建效果有一定的影响。
其他文献
耀变体是具有相对论性喷流且其喷流方向指向地球的活动星系核的极端子类。由于多普勒聚束效应,我们观测到全波段的辐射主要来自喷流。喷流是由大量高能粒子组成,其粒子组成成分与产生机制目前仍不清楚。此外,其辐射机制也存在争议。本文简单介绍了活动星系核及耀变体的背景、基本性质以及物理结构并讨论了喷流内高能粒子的输运过程,重点介绍包含描述一阶和二阶费米加速、由于对流和空间扩散导致的粒子逃逸以及由于同步辐射和假定
学位
绝大多数现实网络是不规则、不均匀的,结构极为复杂。网络的复杂性既体现在整体结构的异质性上,也体现在各个节点及其邻居节点关系的多样性上。主要基于Shannon熵而提出的结构熵可以对网络的复杂性(异质性)进行刻画,但也存在许多不足。比如,在刻画网络复杂性时,传统的结构熵仅关注全局或者局部信息。此外,已有的研究表明,复杂网络中的重要节点虽然仅占少部分,却能在很大程度上影响网络的结构和功能。现已有很多方法
学位
标准宇宙学模型(ACDM模型)中的暗物质成分是冷暗物质。冷暗物质最有力的候选者之一是弱相互作用大质量粒子(WIMP)。在WIMP模型中,当宇宙温度下降到暗物质质量时,冻结开始发生。冻结过程由两个暗物质粒子湮灭成两个标准模型粒子(称为2→2过程)主导,并形成了现在观测到的暗物质能量密度。这一模型成功地解释了包括宇宙大尺度结构(k≤0.1h/Mpc)形成在内的一系列天文观测结果。然而,其在小尺度结构(
学位
TeV晕(TeV halo)是近年来在中年脉冲星周围新发现的一类TeV伽马射线扩展源,其尺度在几十个pc范围。研究表明,TeV晕内高能伽马射线是由逃离出脉冲星风云的相对论性能量电子与背景辐射场内的光子发生逆康普顿散产生。但电子是如何扩散到如此大的尺度仍不清楚,对传统的粒子扩散过程提出了挑战。目前确认的TeV晕有三个,两个由HAWC探测器发现,一个由国家重大科技基础设施高海拔宇宙线观测站(LHAAS
学位
如今锂离子电池(LIBs)已发展成为高效且成熟的储能设备,并普遍应用于人们生活中。LIBs具有循环寿命长、环境友好和工作电压高等优势,但LIBs面临着锂资源短缺、分布不均及成本高等问题,极大地限制了其在储能领域的大规模应用,因此探索可替代的其他类碱金属离子电池成为了必要。作为新兴储能单元的钾离子电池(KIBs)具有钾资源储量丰富、成本低、以及K+去溶剂化能较低等优点,使其凸显出巨大的发展潜力。在碱
学位
天线是未来毫米波通信系统最重要的部件之一,但由于在毫米波频段传输损耗较高,因此研究设计高增益的天线及阵列更适用于毫米波通信系统。微带天线存在带宽较窄、增益不平稳的问题;电磁偶极子天线可以实现较宽的匹配带宽和频带内稳定的增益,然而其剖面一般约大于四分之一波长,且实现的平均增益一般约为8 d Bi还有一定的提高空间。基片集成间隙波导(Substrate integrated gap waveguide
学位
我国汽车保有量的快速增长,为人们带来巨大便利的同时,不可避免地也带来了严重的交通问题。随着人工智能技术在各行业的推广,为交通问题的解决提出了新方案。以车辆、行人和交通标识等作为检测对象的道路目标检测是实现车辆智能辅助驾驶和自动驾驶等智慧交通体系建设的基础,近年来基于计算机视觉的目标检测算法发展迅速,很多两阶段的目标检测算法已经取得了很高的检测精度,但是由于遮挡、天气、光线不足、检测小目标较多等原因
学位
由于超材料的出现,太赫兹领域的相关科学技术的发展也变得非常快速,而利用超材料来完成相关领域的器件设计自然而然的成为了近年来的科研主攻方向,例如利用超材料设计得到的吸波器、极化转换器、调制器等。本文主要以超材料作为出发点,将不同的可调材料结合超材料组成复合型器件,分别研究了宽带单可调、宽带多可调、多带多功能超材料太赫兹功能性器件。利用相应的理论较为详细的解释了所设计的器件背后的物理原因。本文的主要研
学位
低照度图像增强是计算机视觉研究领域中一项基本处理任务,现已受到了广泛关注。人类的视觉机制往往从高质量的图像中获取有价值的信息,为了在弱光条件下获得能见度较高的高质量图像,改善图像的视觉效果,必须对低照度图像进行增强。近些年,很多研究者致力于将深度学习的方法应用在低照度图像增强的领域中,但现有深度学习图像增强网络对于不同尺度特征的表征和感知能力存在不足,其增强结果存在大量噪声、边缘轮廓模糊不清、亮度
学位
5G是具有高速率、低时延和海量连接的新一代宽带移动通信技术。天线和滤波器作为系统前端两个不可或缺的器件,它们的协同设计(滤波天线)可以提高系统的传输效率与通信质量。然而,大多数滤波天线的研究局限于线极化,不适用于某些具体的应用,比如紧凑型室内基站天线。且现有圆极化滤波天线的研究其馈电方式多为探针式馈电、不易于集成、带宽窄、只适用于5G低频频段。另一方面,集成基片间隙波导(Integrated Su
学位