基于深度神经网络的单图像室内场景分段平面重建研究

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:z123098281
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维重建是模式识别、计算机视觉等领域的一个极为重要的研究分支。传统的室内场景三维重建算法均需要借助深度信息及几何基元等特征进行建模,对于复杂室内场景中平面的三维重建效果并不佳。尽管使用深度卷积神经网络的单图像室内场景分段平面重建算法不需要手动标注特征,对当前目标任务可自动学习丰富的特征表示,受光照及纹理等因素较小,取得了一些较传统算法更好的三维重建效果。但是,由于卷积神经网络在重建过程中,感受野是固定大小且局部的,容易使得待重建目标物体的细节难以恢复及难以重建出小物体平面。针对这些问题,本文进行了如下研究:(1)在需要多幅图像或深度信息的三维重建中,传统的三维重建算法对具有遮挡和复杂特性的室内场景重建能力具有一定的局限性,而现有的基于深度学习的方法在受到光照变化和纹理表面缺乏等因素的影响时,易丢失待重建平面内目标物体的细节,提出了一种基于空洞卷积与多尺度特征融合的室内场景单图像分段平面三维重建算法。该算法通过融合利用加入空洞卷积的Res Net-101网络产生的浅层高分辨率细节特征,从而减少随着网络结构层次的增加导致部分室内场景中空间信息的丢失对三维重建细节的影响,使模型能够学习单幅图像中室内复杂场景的细节特征,并通过将条件随机场优化后的定位精度优势与卷积神经网络的识别能力相耦合,对边界分割问题进行处理。本文利用大型室内场景公共数据集的单幅RGB图像进行了训练测试。实验结果显示,本文算法不仅可以重建出室内场景目标平面且能保持待重建平面内目标物体的细节,对复杂背景的室内场景的平面预测鲁棒性较强,平面分割结果较准确,其中,平面召回率可达到接近60%,像素召回率可达到将近70%,且深度预测精度平均可达到92.27%。(2)目前卷积神经网络仅在局部感受野内对通道信息和空间信息进行卷积融合操作,作为深度卷积神经网络提取到的全局特征信息,未充分考虑空间和特征通道间的关系,易丢失待重建平面内小物体信息,不利于重建,本文提出一种基于压缩-注意力机制的室内场景分段平面三维重建算法。该算法首先通过加入压缩-激励模块和空间注意力机制的Res Net-101网络对输入图像进行特征提取,然后利用全局平均池化对特征图进行处理,将得到的特征结果沿着空间维度方面压缩整合到一个通道中,将各二维的特征通道转化为能含有全局感受野的实数,故使浅层神经网络也能获取全局感受野。最后利用带有激活函数——Sigmoid的门控网络单元机制来捕获通道间的彼此依附关系。通过对通道间的依赖关系进行显示建模并自适应校准其特征响应,提升了模型的深度预测精度。实验表明本文算法得到的三维重建模型在深度误差指标Rel、Re l(7)sq r(8)、RMSE、RMSE(7)log(8)及log(7)10(8)上,分别提高了1.7%、5.3%、4.5%、5.3%及1.3%,深度平均预测精度达到93.57%。对较复杂的室内场景具有一定的泛化性和鲁棒性,提高了室内场景的三维重建精度。
其他文献
本文基于研究文献搜集和资料统计,总结出海洋地质-地球物理调查具有平台多样化、装备高精化、技术方法系列化、目标综合化的现状特点,并通过分析海洋地质-地球物理调查研究与地球系统科学之间的密切关联性,指出地球系统科学理念对海洋地质-地球物理调查研究范式、方向和内容、技术架构具有宏观全面的指导意义。未来的海洋地质-地球物理调查研究将在调查理念、装备技术、方法手段、合作研究、数据融合交换与共享5个方面有显著
期刊
数字化时代浪潮下,数据资产已经成为数字经济时代的重要生产要素。充分发挥数据要素的巨大价值,形成数据驱动的智能决策能力,是企业当前数字化转型的重要目标之一。因此,研究如何利用数据这一“隐形资产”,使数据资产化,丰富数据资产应用场景,建立数据资产生态,持续运营数据资产,具有重要的意义。本文从数据资产的相关概念出发,对数据资产的相关问题进行研究,以期为推动企业数据资产管理与应用提供参考。
期刊
随着深度学习在人工智能领域中的广泛应用,图像识别的精度得到较大提升。然而,基于深度学习的目标识别依赖于海量带标注的数据。但是,对现实世界中的海量数据进行标注成本昂贵,且有些罕见的数据获取困难。在此背景下,零样本识别的方法被提出,其关键思想是模拟人类的知识迁移能力,通过对可见类样本的学习,达到对不可见类样本进行识别的目的。其中可见类和不可见类分别表示带标签的类别和未带标签的类别。该方法广泛应用于计算
学位
氧化硅基陶瓷型芯的性能受限于基体材料,严重制约了硅基陶瓷型芯的使用温度。本文结合纤维增强复合材料的思路,以Csf(短切碳纤维)作为第二相,在不同气氛环境下经高温烧结制备陶芯试样,利用XRD、SEM与三点抗弯等分析测试方法,研究Csf对氧化硅基陶瓷型芯性能的影响,并分析Csf对氧化硅基陶瓷型芯的影响机制。实验结果表明:在空气气氛下烧结,Csf的加入,显著的提升了陶瓷型芯的气孔率,降低了陶瓷型芯的高温
学位
随着电子产品朝集成化、高密度化发展以及大功率器件的推广应用,导致产品内部的封装密度也大幅度增加,焊点在服役期间需要承受更为快速、更高频率的温度变化。为此本文搭建了一套以高频感应加热作为热源的快速热疲劳试验装置,以研究快速热冲击对Sn-x Ag-0.5Cu焊点宏观形貌、微观组织、金属间化合物(Intermetallic Compound,IMC)层生长动力学以及力学性能的影响,并针对热冲击过程中焊点
学位
本文通过响应曲面法开展单因素曝气实验和多因素协同实验;对曝气机叶片的结构参数进行优化设计。同时开展高速摄像实验,了解曝气机转动过程中氧化沟内气泡的尺寸大小和分布情况;利用高速摄像实验得到的实验数据对原有的双向流模型进行优化,使用CFD-PBM耦合模型研究氧化沟中的气液两相流动特性。具体工作如下:(1)通过响应面计算的实验方法对曝气机叶片的结构参数进行优化,在本课题前期的研究中,一般都是对单个叶片参
学位
随着我国现代农业建设的不断深入,政府高度重视现代农业保险的发展,农业保险在国民经济中的地位和作用日益凸显。农业保险作为一项国家粮食支持政策,为粮食安全生产提供坚实的保障。基于此,文章梳理了农业保险对粮食生产安全的影响,剖析了保险业支持粮食生产安全的现存问题,切实提出了我国农业保险政策的发展策略,如建立完善的农业保险体系、健全农业保险制度,这些都对促进农业经济健康发展有重要的实际意义和社会作用,为农
期刊
Ti60高温钛合金是为应对高温高压的工作条件而研制的专用材料,因其优异的高温性能而被确定为航空发动机压气机整体叶盘的候选材料之一。然而,Ti60合金的传统成形工艺成本高且高温性能较差,而激光熔覆技术具有高效、无模具近净成形和制备的零部件性能优良等特点,在航空航天领域被广泛应用。同时,在激光熔覆过程中零部件内部容易产生残余应力,进而变形、裂纹等缺陷,降低零部件的内部质量,而超声冲击处理是释放残余应力
学位
目的:观察硝苯地平控释片对糖尿病合并高血压患者代谢的影响。方法:选取佛山市高明区中医院2016年3月至2017年5月120例糖尿病合并高血压患者作为研究对象,通过硝苯地平控释片进行治疗,比较患者治疗前后空腹血糖(FPG)、餐后2 h血糖(2 h PG)、糖化血红蛋白(Hb Alc)、空腹血清C肽(FCp)、餐后2 h血清C肽(2 h Cp)、三酰甘油(TG)、血清总胆固醇(TC)、低密度脂蛋白胆固
期刊
连续SiC纤维增强钛基复合材料(SiCf/TC17)具有高比强度、高比刚度和使用温度高等优点,因而在航空航天领域具有广泛的应用前景。纤维涂层法是一种制备SiCf/TC17复合材料的重要技术。使用纤维涂层法制备SiCf/TC17复合材料时,其中的热等静压(HIP)致密化过程对复合材料的力学性能影响很大。另外,在SiCf/TC17复合材料制备后的冷却过程中,由于纤维和基体的热膨胀系数存在较大差异,使得
学位