基于点云处理的工业散乱多目标检测与定位方法研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:cangyueshang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
高度自动化的生产制造是现代工业最重要的目标之一,而其中最关键的挑战之一是让机器人具有智能识别并定位工业零部件的能力。在工业生产背景下,工业机器人需要从随机散乱堆积的工业零部件中将目标工件实例逐个抓取至下一工作位置,以替代人工将工件从料箱中取出的重复性操作。为了实现这一目标,机器人需要快速并准确地估计出目标实例的六自由度(6Do F)位姿,即三个自由度的空间位置信息和由三个旋转角表示的姿态信息。这种自动分拣目标的任务被称为无序抓取(bin-picking)问题。然而在现实的工业场景中,大量相同的工业零部件散乱堆积在一起,并存在严重的互相遮挡,给工业目标的检测与定位造成了巨大的挑战。并且,随着工业产品的外形越来越复杂,当前算法已不能满足复杂目标尤其是体积较小的目标的检测与定位。在无序抓取的研究领域中,针对小尺寸的工业零部件的研究较少。由于工业零件具有外形复杂、体积较小、低纹理表面且容易相互遮挡等检测技术上的难点,本文从实际应用出发,结合点对特征和深度学习来研究工业场景下散乱多目标的检测与定位方法,主要研究工作和创新点如下:(1)由于散乱工件互相遮挡严重且具有大量相似特征的干扰,主流基于RGB图像直接通过回归或分类得到目标6D位姿的方法在上述复杂多变的工业场景中的效果不甚理想并且可行性较低。为了解决这一问题,本文诉诸于场景的三维激光点云,对基于欧氏聚类的点云分割进行研究,并在此基础上提出了一种适用于散乱工业零件的点云分割方法。该算法首先针对工件互相接触紧密的问题,设计一种接触边缘点的检测方法,解决工件互相接触导致的欠分割问题。其次,采用了距离阈值自适应的欧氏聚类,以更准确地处理点云密度不均匀的情况。最后在自建工件实例分割数据集上的实验结果表明,本文算法在具有比其他传统分割算法更高的分割准确率的同时具有较快的分割速度。(2)基于点对特征和霍夫投票提出了改进的工件6D位姿估计方法并且设计了一个工业散乱多目标检测与定位的软件系统。该算法首先引入了基于法线夹角的几何结构感知的点云降采样方法,在保证压缩率的情况下最大程度地保留丰富的几何特征,为实时性和准确性的平衡提供基础;此外,针对工业零件常含有的平面结构影响投票结果的现象,在特征提取时根据点对的法向特征施加约束,避免位姿估计结果陷入局部最优;同时,为了消除传感器的噪声影响,本文设计了一种新的投票方法,增强特征匹配的鲁棒性;然后,增加了基于层级完全连锁的位姿聚类和迭代3D-NDT的位姿优化方法,进一步提高了工业目标检测与定位的速度与准确度。最后在九针串行通信接口DB9零件的自建数据集和公共数据集Line Mod上的对比实验表明,本文提出的算法能够满足工业生产环境下对于散乱工业目标的检测与定位的需求。(3)基于点对特征和霍夫投票的位姿估计方法虽然具有良好的速度性能,但由于散乱工业目标具有大量重复性几何结构,容易使霍夫投票出现偏差,陷入局部最优解。针对这一不足,本文提出了基于深度学习的3D局部几何描述子匹配网络,充分挖掘3D局部几何特征以构建目标与模型的匹配关系,提高位姿估计精度和对遮挡与传感器噪声的鲁棒性。该算法首先采用点对特征作为网络输入以获得完全的旋转不变性并且避免了局部参考系的计算;其次,结合Point Net和Tearing Net设计了一个新的点云自编码器,以处理无序稀疏的点云并且具有排列不变性;最后,引入了增强倒角距离(Chamfer distance,CD)作为自编码器的损失函数,提高了网络学习点云局部特征的辨别力。实验表明,本方法在自建DB9数据集和公共数据集3DMatch上的鲁棒性与准确率均高于现有算法。
其他文献
随着能源短缺及环境污染等问题日益严重,电动汽车的研发制造已成为各大车企的一个重要发展方向。同时受限于电池续航里程的发展,轻质且性能良好的的铝合金材料逐步成为电动汽车用材的首选。随着电动汽车市场占有率的不断增加,人们对电动汽车的安全性能也越来越关注,如何提高电动汽车碰撞安全性能的同时实现减重是一项非常值得研究的课题。基于此,本文以某款铝合金车身电动汽车为研究对象,建立正面100%刚性壁碰撞模型以及侧
随着汽车节能需求与油耗法规的日益严苛,发展电动化、智能化的新型驱动系统已成为不可避免的趋势,48V混合动力系统作为一种高性价比的节能方案具有诸多优势。同时车联网技术的应用已逐步得到推进,V2X提供的实时道路交通信息为混合动力汽车能量管理策略提供了进一步的优化空间。本文以48V P2构型混合动力汽车为研究平台,围绕基于实时优化的转矩分配策略以及融合道路交通信息的发动机启停控制与滑行制动能量回收策略展
随着云计算的快速发展,市面上已经出现了数百个不同规模的云服务提供商。由于单云服务存在因单点故障导致可靠性降低等问题,一种被称为“多云”(“multicloud”,“intercloud”,“cloud-of-clouds”)的计算模型开始受到研究和关注。尽管这种多云模型能够给用户带来更可靠的数据存储和计算服务,但也带来了更加复杂的外包数据隐私保护问题。多云中的部分云服务器可能是不诚实的,并且这些云
小麦胚芽营养价值极高,但由于高含水量以及高活性的内源脂肪酶等加工限制特性,致使小麦胚芽通常与种皮及糊粉层一起在磨粉过程中被弃除,最后作为饲料或垃圾处理。为充分利用小麦胚芽的营养价值,实现小麦胚芽增值转化,本研究采用微生物发酵的方式利用小麦胚芽生产抗肿瘤活性物质2,6-二甲氧基对苯醌(2,6-dimethoxy-ρ-benzoquinon,2,6-DMBQ),并以发酵液为原料制作一种可供肿瘤患者食用
NVH(振动、噪声和声振粗糙度)性能是评价一辆汽车舒适性好坏的重要指标。当汽车行驶时,轮胎与路面的相互作用是汽车振动噪声的主要来源之一。悬架系统作为车身和底盘的关键连接部分,其设计对整车NVH性能有重要意义。传统的悬架系统设计是基于确定的材料参数、几何特性以及边界条件下进行的。在实际制造过程中由于制造误差、测量因素、工艺水平限制等原因使得实际参数会围绕设计参数波动从而导致整车NVH性能产生不确定性
生物体中的细胞处于一个三维(3D)的动态微环境之中,细胞在微环境中的迁移、增殖和分化等行为受许多因素的影响,例如:细胞外基质构成,细胞与细胞之间的串扰,机械刺激产生的物理、化学以及生物信号等。细胞外基质中由纳米尺寸的胶原蛋白和弹性蛋白纤维所形成的3D网状结构,及其与周围的物理和化学微环境的相互作用均影响着细胞的功能与行为。因此,利用具有纳米结构的生物材料模拟细胞外微环境中的物理、化学以及生物信号从
环境污染和生态损害治理已经成为当前经济发展过程中一个重要的社会问题。作为有着环境风险防控和社会管理职能的环境污染责任保险,在生态文明建设和倡导绿色金融发展的今天,发挥着越来越重要的作用。本文选取深圳市这个试点城市,研究其在推行环境污染责任保险工作上的做法,并对之后的发展提出相关建议。通过文献综述、案例分析和统计分析的方法,从政府到市场再到第三方机构三个层面的运行情况,总结了深圳市在试点环境污染责任
桩基础由于其承载力高、沉降量小、普适性强等突出特点被广泛应用于工程建设中。关于桩基础承载特性的研究已有不少,但多针对于均质地基中受荷单桩。非均质地基中桩的荷载传递性能明显有别于均质地基,目前少有解析解。针对非均质地基中的桩基础,本文提出了土的剪切模量沿深度呈幂指数变化时竖向受荷嵌岩桩和摩擦桩、水平受荷嵌岩桩承载变形的解析解,并分析了单桩的承载特性。本文主要研究内容和结论如下:(1)针对非均质地基中
本文基于进一步提升高铬铸铁材料的硬度/耐磨性,以获得一种高耐磨性,低成本的耐磨材料,满足逐年来对高性能耐磨材料的应用需求,采用粉末冶金法以高铬铸铁为基体成功制备了全致密化的烧结态纳米级TiCp增强亚共晶15Cr系高铬铸铁复合材料。作者首先在亚共晶15Cr系高铬铸铁成分确定的情况下较为系统的研究了TiCp添加量在5~25%范围内改变时高铬铸铁基复合材料的超固相线液相烧结致密化行为和TiCp含量对复合
工业互联网的背景下,随着制造和生产过程的集成数字化,工业环境伴随着越来越多的数据。而数据普遍具有价值,人工智能与深度学习的方法分别为机器学习数据开发提供了巨大的优化潜力,如提高效率、灵活性和生产过程的个性化。通过状态监测、异常检测以及预防性维护或改进,以数据驱动的过程建模,能够更快地识别任务状态,使工业生产模式自主性得到增长。这提供了生产设备的预测性维护,并改善了工业过程的监控模式。在边缘计算背景