基于注意力机制的三维点云语义分割方法研究

来源 :南京大学 | 被引量 : 0次 | 上传用户:geoffreywan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维点云分割是将点云分割为多个具备相同语义的点集的过程。由于点云数据本身存在着高冗余度、采样不均匀、缺乏纹理等问题,因此点云的语义分割极具挑战性。近段时间,深度学习在三维研究领域大放异彩,推动了技术的演进和研究的深入,在三维语义分割领域,各类深度学习方法百花齐放,但现有的方法仍未能充分利用场景或模型中普遍存在的全局依赖和类别间的语义关联,为此,本文从注意力机制出发,通过设计关系学习网络层来对特征进行平滑和增强,从而提高特征在各类别上的显著性,本文提出的两种方法由浅入深,最终基于这两种方法构建了点云语义分割原型系统,本文的主要成果包括以下三点:(1)基于自注意力机制的渐进式三维场景分割方法三维室内场景点云分割是将点云表示的原始场景分割成带有语义标签的点云。为了缓解大规模室内场景普遍存在的点云类别不均衡问题,并且充分利用场景本身存在的层次性,我们提出了一种渐进式的分割策略,将场景分割成“背景”和“前景”,并且设计了适用于子流形稀疏卷积网络的自注意力模块来对全局依赖和上下文关联进行建模,增强了特征的表征能力。通过使用该网络框架,可以对每个输入框架的点云赋予一个对应的语义标签,为了验证该网络框架的有效性,我们进行了一系列的佐证实验,实验结果表明,本文提出的网络模型能够较好的处理三维室内场景,在标准数据集下表现突出。(2)基于上下文先验的三维通用语义分割方法为了充分利用场景和模型中隐含的上下文信息,明确类别边界,缓解由于连续卷积操作带来的边界特征模糊问题,本文构造了一个可学习的上下文先验模块,用来将类内和类间的依赖关系建模为先验知识。通过上下文先验矩阵对同类特征进行平滑,对不同类特征尽可能使之疏离,提高不同类特征的区分度,减小模型搜索空间,加快收敛。同时为了构建全局依赖,我们在模块内后置一个自注意力模块,用来对已经具备上下文语义关联的特征进行一次聚合,对特征进行二次强化,提高模型的分割精度。实验结果证明,本文提出的上下文先验模块具有很强的拓展性和广泛的适用性,并且在模型和场景语义分割数据集上都取得了不俗的表现。(3)PointSeg三维点云分割系统的设计与实现为了更好的开展三维点云分割工作,我们将第二章和第三章的工作进行了归总,并将其成功整合成了一个方便研究人员和用户使用的可交互系统,该系统内嵌了本文提出的两种网络模型,可以对输入的点云进行分割处理,同时进行可视化对比。从软件设计和功能实现的角度,我们对该系统进行了全方位的阐述,并且进行了演示,来展示系统的主要功能和实际效果。
其他文献
期刊
采用熔融共混法制备低密度聚乙烯/聚苯乙烯/马来酸酐接枝聚乙烯(LDPE/PS/PE-g-MAH)复合材料,并采用超临界CO2釜式发泡法制备了发泡材料,研究了超临界CO2浸润时间、发泡压力、发泡温度对复合材料发泡行为的影响。利用DSC、流变仪、SEM等仪器对复合材料及其发泡材料进行表征。研究结果表明,LDPE/PS的熔点为112.7℃,LDPE/PS/PE-g-MAH的熔点为110.8℃,PE-g-
随着无线通信的快速发展,4G通信已经大规模普及并且逐步向5G通信过渡。手机作为移动终端设备的一部分,在日常生活中起着越来越重要的作用。由于当前的手机具有高屏占比、超薄化和全网通等特点,这就需要手机天线在更加小的空间内满足更多频段的覆盖。另外,为了更好地满足5G通信的需求,多天线技术也被广泛地使用在天线设计中。基于此,本文重点对手机天线进行研究与设计,主要研究工作如下:首先,本论文利用耦合馈电技术设
我今天想就罪刑法定原则及其司法化中的法律解释等问题,同大家进行讨论和交流。可以这么说,我们对"罪刑法定"这个主题是情有独钟的,它是一个独具魅力的话题。1997年,我国修订刑法第一次规定了罪刑法定
期刊
随着自由曲面镜片的迅速推广和广泛应用,眼镜市场亟需建立一个合理的评价标准来帮助消费者判断镜片成像质量,本文提出了基于哈特曼原理的检测方法,对自由曲面镜片屈光度、波前像差、光学畸变进行测量与研究,通过对以上三个光学参数的理论分析及实验分析来共同评价自由曲面镜片的成像质量,其主要研究内容如下:(1)分析屈光度及其检测方法,搭建屈光度测量系统,基于哈特曼原理对不同自由曲面镜片的相同有效区域进行检测,再通
在产品开发的流程中,来自用户域的客户需求决定了产品定位,是关乎产品成功与否的最初环节。随着制造业生产力水平的快速发展,客户需求呈现出变化速度快、个性化程度高、表达形式多样的特点,传统的客户需求研究方法由于效率低、人工干预度高等原因已经不能满足当下的市场环境。在大数据时代,利用数据驱动手段,高效、客观地获取及分析客户需求成为产品开发中亟待解决的问题,为此,对客户需求的获取与分析方法进行了研究,提出了
随着国内城市化程度越来越高,更多的人口涌入城市,各大城市人口的不断增加对城市公共交通的压力越来越大,城市轨道交通作为城市公共交通的主要方式之一,成为城市居民出行必不可少的出行方式,目前我国已经通过城市轨道交通企业建设并运营开通地铁的城市已达35个。随着城市轨道交通在国内的快速发展,各大城市的轨道交通企业面临着建设融资需求量巨大、企业短期盈利能力较弱等问题,为此各大城市轨道交通企业创新投融资模式,寻
我国经济飞跃向前发展,商业建筑体的形式也越来越趋多样化。大型商业综合体通常会集餐饮、客房、商业、娱乐于一体,内部的人员组成及密度复杂多变,大量的有害有毒烟气和庞杂的疏散路线都对商业综合体的应急疏散提出了严苛的条件。本文主要通过国内外文献调研和实地调研两种方式进行商业综合体火灾应急疏散过程分析,得出城市大型商业综合体应急疏散过程的相关结论,提高人员疏散的安全性。本文的主要研究内容及成果如下:(1)通
随着Web2.0技术的快速发展及人工智能技术的日益成熟,互联网环境下累积了海量文本数据,其具有海量、多源、异构等特点且蕴含了极其丰富的语义知识,因此对其进行抽取能够有效提炼具有潜在价值的结构化知识信息,从而实现文本信息结构化,因此本文重点关注如何从多源异构文本数据中有效抽取高质量、结构化三元组信息,该问题是信息抽取领域重要研究内容之一,具有重要的学术研究价值及工业应用价值。目前,信息抽取技术主要包