面向工业场景的三维模型点云分割

来源 :山东大学 | 被引量 : 0次 | 上传用户:sunfor
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着经济社会及计算机技术的发展,工业制造对生产力的要求越来越高,智能工业机器人在工业制造领域扮演着越来越重要的角色,在电子、机械、物流等领域都有了更广阔的应用空间,被广泛应用在智能拆垛、工件上料、货品抓取、物品定位、缺陷检测、尺寸测量等工业任务中。在这些工业任务中,对场景中的物体进行准确的感知是完成整个工业机器人任务的重要环节。同时随着3D扫描技术的发展,可以提供丰富的几何、形状和尺度信息的点云数据由于采集成本降低、受光线条件影响较小等因素成为目前计算机视觉中重要的研究对象。在这些工业任务中,对工业场景中的物体点云进行准确的分割是对场景进行感知进而进行理解的关键,是完成后续工业机器人控制等任务的重要基础。在工业任务中,工业场景中的物体大多为刚性物体,并且待处理的物体通常都是根据一个已知的设计好的三维模型生产制造出来的,而该场景也是由一个个属于该模型类别的完全相同的物体相互堆叠而成,本文的主要研究内容就是面向这种特殊的工业场景,要将该特殊工业场景中的物体实例一个个的分割出来,即可以理解为已知物体三维模型的同类别物体组成的点云场景的实例分割任务。在本文的工作中,我们首先采集了一组符合任务需求的真实工业场景下的点云数据,提出了一种基于边缘检测、带条件的欧几里得聚类、ICP配准等传统点云处理方法的点云数据自动化标记方法,构建了一个用于神经网络训练与评估使用的带物体三维模型的点云分割数据集。在此基础上,提出了一个利用物体三维模型信息的用于点云分割的神经网络框架,该神经网络针对该同类别物体的实例分割任务无法事先知道场景中实例的数量的特点,提出利用神经网络学习物体实例的中心点及相对于物体模型位置的姿态信息的方法,针对已知待分割物体的三维模型的特点,提出了一种利用物体三维模型信息的带模型的注意力机制模块,在基于这两个主要思路设计的神经网络上进行相关语义信息、中心点信息及相对姿态信息的学习,最终通过一个基于聚类优化的后处理过程对神经网络预测的中心点信息及相对姿态信息进行筛选,然后利用基于物体模型的先验包围盒对点云进行分割选取来得到最终的点云分割结果。经过具体实验,本文构建的基于真实工业机器人应用场景的带物体三维模型的点云分割数据集可以为使用基于深度学习的方法解决该工业场景下的特定点云分割问题提供数据基础;提出的利用物体模型信息的基于神经网络的点云分割方法能够得到与当前先进的点云分割方法相近的点云分割结果,并且分割结果中物体实例的几何结构的完整性更好;其中神经网络预测的工业场景中物体实例的中心点以及相对于物体模型位置的姿态信息又可以直接提供给工业机器人,来为工业机器人进行相关分拣、抓取等任务提供任务场景中待处理物体的视觉信息。
其他文献
背景及目的β受体激动剂是一类苯乙醇胺类化合物,广泛应用于呼吸系统疾病的治疗。它们最初在临床被作为生育力抑制剂、支气管扩张剂和心脏补充剂使用。也有研究表明,长期使用β受体激动剂治疗的阻塞性气道疾病患者会增加心血管不良反应的发生风险。由于β受体激动剂能有效提高饲养动物的生长速度和降低酮体脂肪,因此经常被非法添加至动物饲料中,继而在肉类中造成β受体激动剂的残留。食用被β受体激动剂污染的食物可能导致严重的
学位
本翻译实践报告的目标文本为韩国轻小说作家张康明所著社会问题小说《漂白》。作者将生活在这个框架既定、阶级固化到几乎已经无法动弹的当今世界中拼死挣扎的年轻一代称作“漂白一代”,其行为特征之一表现为群体或个体的自杀倾向,并以此作为反抗社会、显示自我生命价值的一种非正常手段。小说深刻地揭示出当代年轻人真实的生存现状以及踌躇满志却局限于时代和社会的束缚而无法施展自身才能的矛盾心理。本翻译实践报告共分为五章。
学位
研究背景《医学统计学》是高等医学教育课程体系中重要的基础课程,但其概念抽象、公式繁杂而使医学生觉得难以理解和掌握,甚至对统计学课程心存畏惧。近年来,国内众多院校在统计学教学内容、教学方法等外因方面进行了很多积极的探索和研究。但是以医学生为研究主体,进行统计学态度和统计学自我效能等影响统计学教学效果内因方面的研究却未得到足够重视。国外研究表明,学生对统计学的态度和自我效能可以直接影响到他们的学习兴趣
学位
区域供热是当前中国北方主要的供热方式,在冬季供热能耗所占比重很大,而区域供热系统由于覆盖范围较广,其控制调节有一定的滞后性,而区域供热系统不合理的运行方式导致能源浪费等问题的出现。因此,准确预测区域供热系统的用户热负荷和精准调控其运行参数对整个供热系统的节能减排和优化升级起着至关重要的作用。本文选用某能源公司以燃气锅炉作为热源的三个区域供热系统作为研究对象,为用户热负荷预测及运行参数优化提供了可靠
学位
近年来,随着我国高速铁路的快速发展,人们对旅客列车准时准点的要求也在不断提高。当线路发生故障时,能够迅速、准确地查找故障位置,排除故障险情,对保证列车通行的准点率,尤为重要。目前,高速铁路牵引供电系统测距装置的测距方法有:阻抗法、吸上电流法、上下行电流比法、吸馈电流比法等。石济客专以吸上电流法为主。铁路牵引供电系统一条供电臂平均输电距离为30km,而现阶段所使用的故障测距误差范围只能达到±500m
学位
随着经济的快速发展和科技的进步,电力系统的信息化基础建设水平也在不断提升,传统的人工巡检的方式已经远远不能满足电网智能化管理水平要求,开展基于人工智能技术的输变电场景巡检具有重要的现实意义。图像描述生成技术是计算机技术领域的研究热点,输电线路、建筑工地等场景环境多变,存在很多危险因素,通过研究图像描述技术进行输变电场景的危险描述以达到预警的目的,为保障电网稳定运行提供有力的技术支撑。本文提出了一种
学位
水下无线传感器网络是打开海底世界的钥匙,在海洋污染监测、资源勘测、海底地质灾害预防和国防领域得到广泛应用。它由一组具有声波发射器的传感器节点组成,数据包以多跳的方式从海底转发到水面的船只或者中转站。路由协议决定着数据包的转发行为,是水下网络的核心。水下网络中的节点通常使用能量有限的蓄电池供能,因此如何提高水下网络的能量利用率、延长网络生存时间是设计路由协议时必须考虑的一个关键问题。经典的水下路由协
学位
随着我国社会和经济的快速稳定发展,人民的生活水平和受教育程度普遍提高,越来越多的人开始意识到健康的重要性,获得安全用药知识和用药指导已成为更多人的需求。药物治疗是最常用、最方便的治疗手段,人们往往根据自己的经验和说明书内容来选择药品,并没有完全了解和掌握各个药品的具体情况,造成不合理用药。药品说明书是载明药品信息的重要载体,是医生和病人如何用药的科学依据和指南,但市面上药品种类繁多、现代医药知识爆
学位
我国目前正处于能源结构改革和升级的关键阶段,在配电网智能化发展的过程中,明显存在着配电网通信效率低下的问题。本文围绕低效通信配电网的电压控制问题开展了相关研究:(1)提出了低效通信配电网中可量测节点的电压数据量测误差补偿方法,以及不可量测节点的电压数据估测方法。首先根据配电网通信链路状态和数据传输情况分析了低效通信配电网的具体特征;然后对低效通信配电网中电压数据量测误差和估测误差进行了优化和补偿;
学位
公路运输一直是交通运输业的主要运输方式,商用车作为公路运输的主要工具,其销量也一直在稳步上升,商用车使用量的增加势必会增加燃油的消耗,进而增加大量污染气体的排放,对环境、资源都会造成更大的压力。燃油消耗的支出也是交通运输业主要成本之一,商用车的燃油利用率若一直得不到改善,则会增加交通运输经营者的支出,降低盈利,抑制行业的发展。降低油耗既可以缓解给环境、资源造成的压力,还可以降低交通运输的成本,增添
学位