基于深度学习网络的点云数据的识别和分割

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:xiejie_850119
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年来,随着自动驾驶等技术的发展,要求可以对三维物体进行处理和分析。点云作为一种最简单的三维数据组织形式,可以由很多设备生成,如激光雷达设备等。就如何分析和理解三维物体方面,已经有很多人做过尝试,并取得了不错的成果,如多视图法和体素法。然而,这两种方法都存在着缺陷。多视图法是通过将三维物体从多角度渲染,得到一组二维图像,然后使用经典的图像神经网络进行处理。多视图法需要渲染,这个过程会很漫长,另外将三维转换成二维图像,从根本上舍弃了直接在三维物体上进行语义分割的可能。体素法是将三维物体划分成规则的网格结构,像图片卷积一样,三维卷积工作在规则的网格结构上。然而,随着体素分辨率的提高,所需要的算力和内存急剧增加。Point Net[1]是一项开创性的工作,引领了使用深度学习模型直接处理三维点云的潮流。点云格式是一种松散的组织结构,具有无序性、平移性、旋转性和缩放性的特点。直接使用三维点云作为输入,需要解决点云固有属性带来的问题。本文研究了如何使用深度学习网络直接处理三维点云,执行点云的识别和分割任务。具体来说,如何处理点云的不规则结构带来的无序性、平移性、旋转性和缩放性的特点,使深度学习网络可以用来处理点云,进行点云的识别和分割。另外,针对现有的直接使用原始点云作为输入的网络模型的不足,为了能够直接使用深度学习网络进行点云的分类和分割任务,本文就探索特征点查询、探索点的局部结构、构造新的对称函数和构建转换网络对齐点云方面,做了一些贡献,具体如下:(1)针对特征点查询问题,本文提出了双球查询方法。该方法可以避免类Point Net++[2]网络结构在局部特征点查询时遇到的点重叠问题。双球查询方式基于两个单球查询嵌套而成,具体来说,双球查询的结果是两个单球查询结果的差集。(2)针对探索点的局部结构不足的问题,本文提出了边角信息特征融合图。在无序的点云中构建物体的边信息和角度信息可以尽最大效果保留原始物体的信息。在构建角度信息特征图中,我们使用查询点的临近点生成其法向估计,利用临近点投影到查询点的法向平面的投影点角度大小,来安排临近点的顺序。在角度信息特征图之上,构建边信息特征图,具体来说,利用点与点之间的在度量空间的相对位置进行构建。边角信息融合特征图有效保留了点云的局部结构信息,有利于点云特征的提取。(3)针对构造对称函数的问题,本文提出了基于三池化的对称函数。具体来说,针对单一最大池化作为对称函数,本文提出使用最大池化、平均池化和中值池化联合的三池化函数。三池化可以有效避免取单一特征值的问题,从而可以保留更多的信息,同时,三池化预测更加稳定,方差更小。针对点云对齐的问题,我们提出了高维空间转换网络。该转换网络也是基于三池化方法。在三池化提取到更多高维特征后,学习到转换矩阵,用于点云的对齐。
其他文献
昭通市位于滇东北地区,海拔高,坡度大,由于其环境脆弱性、生态敏感性问题,城镇化发展一直囿于低谷。同时,其城镇化发展带来的经济发展粗放,资源利用效率低,创新能力不足等问题对生态环境又造成了进一步的损伤,因此探究昭通市城镇化过程中的生态安全格局,对昭通市城镇化过程中的生态问题进行评估和保护十分必要。通过对生态问题的逐步厘定,能够探究城镇化与生态安全之间的平衡关系,使两者相辅相成,共同推动城镇化的可持续
多环芳烃(,PAHs)是一类广泛存在于自然界中的有机污染物,由于其具有致癌、致畸、致突变的三致效应以及生物富集特征,能够对人类和生态环境的健康造成一定的威胁。河口地区是人类活动较为密集的地区,也是海陆交互的典型区域,既接纳了来自上游河流传输的污染物,又是下游河口城市污染物排放重要的“汇”,其复杂的水动力条件以及环境因子在河口形成天然的理化性质梯度使得污染物在河口有其独特的赋存特征,同时也是各种微生
土壤中蕴含着庞大的微生物数量和丰富的微生物类群,驱动着各尺度上关键元素的生物地球化学循环。土壤微生物群落极高的多样性在很大程度上归因于微观尺度上土壤生境的复杂性与异质性。随着气候变暖和中低纬地区降水减少,亚热带森林在未来很可能面临更为严峻的干旱气候,这将对土壤微生物产生深刻影响,与之相关的生态系统功能和服务也将受到波及。尽管过去已在宏观尺度上对土壤微生物群落结构及其构建机制开展了近二十年的研究,然
近年来,工业、农业等行业的发展引发了严重的水污染问题,在排放的污水中存在的大量的有机物、重金属等有害物质,已经威胁到了人类的生命健康和生存环境,因此发展有效的水处理技术是解决水污染问题的主要途径之一,以保证环境安全。光催化技术因其具有低能耗、无二次污染、易操作等优势,在水处理领域被广泛应用。在众多光催化剂中,Cd S以其较窄的禁带宽度和可见光内响应的特性而脱颖而出,具有较高的光能转化效率。然而,C
随着移动设备的不断普及和增加,以及其自身计算能力和存储能力的提升,当今社会对于数据安全、数据隐私保护问题的关注度也逐渐提高,从数据隐私保护领域中应运而生的联邦学习也备受重视。作为分布式机器学习的一种方法,联邦学习要求原始隐私数据在本地客户端存储和计算而不再将原始数据直接上传至不受信任的中心服务器,这种方法能够显著地保护用户隐私免遭外部敌手的攻击。尽管如此,通过分析客户端上传模型参数的差异,例如在深
近场声全息是一种十分有效的噪声源定位及声场可视化技术。等效源近场声全息因不受限于声源形状且数学模型的建立及其传递矩阵的构造简单,近年来得到了广泛的应用。由于倏逝波随全息距离的增加呈指数倍衰减,经典的等效源近场声全息方法适用于近场测量,且上限频率受限于麦克风的平均间距。鉴于此,本文提出一种新型正则化参数选取方法和一种移动等效源网格模型的压缩等效源法近场声全息,旨在提升等效源近场声全息在大全息距离和更
提升阴极氧还原反应性能是提高燃料电池使用效率的关键。目前使用的贵金属铂成本高、自然储备量低,使燃料电池的推广应用受到阻碍。因此,研究开发高效低廉的碳基催化剂材料来替代贵金属显得十分重要。本论文以叶片形貌的Zn-ZIF-L材料为前驱体,制备出碳纳米管包覆的氮掺杂片状多孔碳和铁-酞菁包覆的氮掺杂多孔石墨烯催化剂材料;并研究了催化剂材料结构、组分与其电催化性能之间的构效关系。主要的工作内容如下所示:(1
本文主要研究了一类具有轨道翻转的对称双同宿环分支问题,主要从两个角度来研究,一是考虑原系统扰动后产生的轨道是R对称的情况?二是考虑原系统扰动后产生的轨道是非对称的情况,若系统扰动后存在某种轨道,那么根据系统的对称性,一定还存在另一条轨道与之对称.在第一章中,我们先对双同宿环分支的研究背景,研究现状进行了简要的分析与概述,以此作为研究基础.接着,我们简单陈述了本文的学术创新点以及主要研究成果.在第二
细胞外囊泡(EVs)是各种类型的细胞分泌的小囊泡,通过大分子的转移来介导细胞间的通讯。细胞EVs携带多个反映其供体细胞起源的载物分子,因此被认为是用于早期诊断的可靠且非入侵性的生物标记。然而,EVs当中多种细胞来源的细胞外囊泡掩盖了由肿瘤或非肿瘤来源的细胞外囊泡信号。因此,识别EVs的细胞起源是诊断应用的前提。在本研究中,我们开发了一种智能概率系统,用于追踪通过单分子多色成像实现的单个EV的细胞起
背景:人为土地利用的变化是造成全球生物多样性下降的主要因素之一。通过改变生态系统的生物和非生物条件,人为土地利用的变化可潜在地影响包括环境过滤、扩散和物种相互作用在内的生态过程。因此,土地利用的变化不仅影响生物多样性的数量,还可能对物种、群落或生物多样性的空间分布产生影响。生物多样性的空间分布变化可能会影响生态过程、生态系统的功能和服务,因此,探索土地利用变化对生物多样性空间分布的影响对于生态系统