基于深度学习的三维实例分割技术研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:gogouu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在智能制造领域,如何利用三维视觉传感器对随机散乱摆放的工件进行三维建模与分割,是利用机器人准确定位和抓取工件,实现高度自动化生产的基础。自2018年深度学习技术被首次应用到三维实例分割领域后,相关研究取得了初步进展,但仍然存在着分割精度低,速度慢的问题。尤其是智能制造领域,小尺寸工件还具有低纹理、小体积、易遮挡的技术难点,因此,本文以DB9九针串行通信接口零件为典型应用对象,研究密集摆放工件的三维分割问题。本文主要内容如下:(1)总结了目前三维实例分割技术的研究现状,并阐述了相关的算法原理,为本文的研究内容提供理论支撑。(2)针对由传感器采集的原始数据中出现的离群点和冗余平面的问题,使用了统计滤波与Ransac算法对点云数据进行预处理,为分割网络提供高质量的训练数据。同时,针对在构建工件的实例分割数据集中出现的人工标注耗时问题,提出了一种由人工标注数据合成工件实例分割数据集的算法,并対合成数据集与人工标注数据集进行了实验对比,验证了数据集生成算法的有效性。(3)提出了面向散乱工件场景的实例分割网络IP-BoNet(Industrial PartsBounding BoxNet)。该网络以3D-BoNet为基础,针对散乱工件场景下点云的特点进行了四个方面的改进,具体包括:1)工件点云规模庞大,而在3D-BoNet的边界框回归分支中,由于仅使用全局特征作为边界框回归的输入,导致缺少局部信息。针对此问题,本文将网络的多个下采样层通过各点特征相加的方式进行融合,增加了供边界框回归的局部信息,提高了分割的精度;2)工件点云密度不均匀,而3D-BoNet在特征提取过程中未考虑点云密度变化。针对此问题,本文设计了一个基于注意力机制的密度加权的特征提取模块。该模块能够赋予低密度区域的点云特征更高的权重,让网络学习到更具有表达能力的特征;3)针对网络下采样过程使用固定大小邻域而导致的部分点云无法被利用的问题,本文使用空洞卷积扩大采样中心点的邻域范围,让特征图获得更大的感受野,能够更加充分的利用输入的点云数据;4)在3D-BoNet网络中采样算法为最远点采样,随着点云数量的上升,其计算量急剧增加,不满足工业生产背景下的实时性要求。本文通过在网络的高层与低层中分别使用最远点采样与随机采样法,提高了计算速度。最后,在工件数据集上开展了一系列实验,表明本文提出的网络相比于3D-BoNet拥有更高的精度与速度,验证了改进方法的有效性。
其他文献
川剧,是一种主要流行于巴蜀地区的地方戏曲剧种,现为国家级非物质文化遗产。它的形成是随着巴蜀地区人口与文化结构的变化,在本地高腔和灯戏的基础上融会中国戏曲雅部和花部等多种声腔,逐渐形成集“昆(腔)、高(腔)、胡(琴)、弹(戏)、灯(调)”等多声腔为一体的地方剧种。川剧高亢激昂的徒歌式演唱,节奏明快的锣鼓,幽默风趣的方言,兼容并蓄、博采众长,对研究中国戏曲艺术有着重要的价值。随着时代的发展,和众多的非
随着我国经济的发展,电网规模不断扩大,电力变压器的数量不断增加。电网的安全关系到国计民生。电力变压器作为电网的关键设备之一,保障其的安全可靠运行对于电网的安全具有重大的意义。同时,电力变压器的监测系统不断改进,监测数据不断增加。如何有效地利用监测数据,进一步提高电力变压器状态评价和故障预测的精度,具有重要的研究价值和意义。图神经网络是专门处理图数据的神经网络模型,能够充分挖掘节点之间的相互关系,能
目前,在扫地机器人实际清扫过程中,扫地机进入地毯后由于底盘滚轮与吸尘结构的原因会困在其中,无法为用户进一步清扫。此外,扫地机器人在湿拖清扫模式下不准进入地毯。本文针对扫地机清扫时触碰地毯的问题,采用数字图像处理的方式,对扫地机器人清扫环境中的地毯和地板图片进行纹理特征提取,然后采用图像分类算法进行地毯识别,将地毯识别结果当作障碍物传入扫地机器人环境地图,最后进行点对点路径规划。论文主要内容如下:(
轨道车辆变流器箱体内存在大量的电器元件以及用于通风冷却的离心风机,其中离心风机产生的气动噪声是箱体最主要的噪声来源。为了降低箱体的整体噪声,需要对风机的气动噪声特性进行研究。由于变流器箱体较大、风道复杂,利用仿真或实验对风机噪声进行测量耗时较长。因此,为了降低产品研发的时间成本,本文将代理模型技术运用于变流器箱体风机气动噪声的建模及预测,并开发了基于代理模型的变流器箱体气动噪声快速建模软件,指导变
随着我国公路系统的积极建设和机场数量的增多,路面不可避免地会出现不同程度的病害。在这些病害中,裂缝是最常见也是最严重的。现阶段的路面裂缝检测任务中主要是以人工检查方式居多,检查过程中劳动强度大且检查效果差。所以,实现迅速准确地掌控路面关键信息,逐步实现路面缺陷的自动化检验,是现阶段需要解决的重要任务。伴随着深度学习技术的不断发展,其识别准确度逐渐远超传统识别算法。相较于传统识别算法,深度学习技术可
随着我国经济水平的飞速发展和现代化工业体系的不断完善,近年来我国的汽车产业实现了飞跃式的增长,并且将在未来很长一段时间内继续保持增长趋势。汽车产业的发展同时也会带来环境、资源、道路安全等方面的问题,为了解决上述问题,汽车轻量化的研究尤为重要。先进高强钢在车身上的广泛应用就是实现汽车轻量化的途径之一。相对于普通钢来说,先进高强钢更难成形。CAE仿真分析软件可用于预测先进高强钢成形过程中可能产生的缺陷
光纤通信已经成为最重要的信息传输技术,它就是用光纤作为传输介质的通信方式,它是以一种频率可以达到1014 Hz的高频光波为载体,它的出现为高速和大容量通信提供了可能,但是在光纤通信的早期光纤的损耗和色散问题限制了它的传输容量和传输距离。随着制造业的不断进步,光纤的损耗问题已经不在是制约因素,因此光纤的色散成为制约实现超大容量、超长距离光纤通信的唯一因素,这个问题已经讨论了很长时间。在这种情况下,研
绝大多数的程度副词都经历了漫长的语法化过程。现代汉语中的程度副词是使用频率较高的一类副词,也是汉语语法研究的重点,这方面的论述相当丰富,但是语法化过程的聚类研究还相对少一些。本文在前人研究的基础上,选取其中数量最多、使用频率最高的高量级绝对程度副词作为研究对象,综合运用语法化理论,全面而系统地对其语法化现象进行整理与分析,分类归纳这组词的语法化路径及语法化程度,并尝试解释其语法化的动因和机制。本文
氢能发电具有良好的高能量值、稳定、清洁、来源广泛的特点,受到了人们的广泛重视。固体电解质(spe)电解水制氢技术是在作为一种制氢工艺中发展成熟并且具备高效、无污染、安全稳定、高密度纯度等特点成为各类制氢技术中的佼佼者。Ir O2(二氧化铱)因其具有良好的高化学稳定性和高催化活性而被广泛认为它是最佳的中性阳极反应催化剂。电解水技术中的研究重点在于降低铱在催化剂中比例得到优异的催化性能。SnO2因其具
马之龙是活跃在清代嘉庆、道光年间的云南诗人,他的交游面广,在与刘大绅、李於阳、戴淳等著名诗人有着深厚友谊的同时,他还与诗僧妙明、山中道人等宗教人士往来频繁。马之龙在二十岁时已享有诗名,他所作的《玉龙雪山记》在当时已为人传诵,但因地域局限,目前学界并无对其生平、交游活动及诗歌创作等方面完整、系统的研究。本文将重点放置在对马之龙生平及诗歌创作的研究上,第一章通过对各种历史资料的挖掘与整理,结合时代背景