基于点云局部特征的机器人抓取目标识别方法

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:limajubo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器人抓取是智能化机器人系统的集中表现,而目标识别作为机器人抓取的核心步骤,一直是机器人领域的研究热点。随着计算机算力与传感器成像质量的不断提高,在结构化环境中基于简单二维图像的目标识别与抓取得到了广泛深入的研究,相关技术已逐步趋于成熟。然而随着社会对机器人智能化需求的不断提升,仅使用二维信息来表征复杂环境中三维物体,不可避免的会出现信息损失,使得机器人难以实现在非结构化环境中对于多目标物体的高精度抓取。相比于二维图像,三维点云具有可以获得模型场景的深度信息,并且不受光照与视点影响等优势。受益于近年来点云获取技术与计算机运算能力的不断提高,针对点云的视觉与抓取研究成为了机器人领域新的热点。而基于点云的目标识别与机器人抓取,依然是一个极富挑战性而且具有重要研究价值的问题。鉴于此,本文从三维点云出发,针对抓取中的模型与场景表征问题,提出了一种高性能的特征描述子,点对特征直方图(Histogram of Point Pair Features,Ho PPF);并基于此开发了一种特征二值化算法B-HPPF(Binarized Ho PPF)。然后,针对抓取中的目标识别问题,进一步提出了基于上述描述子的两种三维目标识别算法,并在此基础上开展了多目标物体的机器人抓取研究。更具体的,本文在点云特征提取、三维目标识别、机器人系统标定和多目标识别抓取方面取得了如下进展:1、在点云局部特征提取方面,首先提出了一种点对特征直方图(Ho PPF)描述子,其在鉴别力、鲁棒性与计算效率方面取得了优越的综合性能,其对应的RPC曲线的AUC值可以达到0.9070,比实验基准线高出了0.5105;接着,为了满足机器人端对于内存要求与匹配速率的严格限制,基于Ho PPF开发了一种特征二值化方法,提出了二进制点对特征直方图(B-HPPF)描述子,进一步提高了描述子在特征匹配效率与结构紧凑性方面的性能。该描述子的紧凑性参数为3.75,比经典的实值描述子提高了近15倍,比其余二进制描述子提高了近3倍;在局部邻域内的提取时间为0.1056秒,速度相比其余描述子快了近15倍。2、在三维目标识别方面,基于描述子Ho PPF与B-HPPF开发了两种三维目标识别算法:基于随机采样一致性的目标识别方法与旋转质心聚类的目标识别方法。然后在各个权威数据集上与经典的描述子进行目标识别准确率与姿态估计精度的性能对比实验,对应的目标识别分数1F(28)0.9865,准确率可以达到92.25%,旋转误差为0.5168°,平移误差为1.152mr(模型分辨率),验证了所提算法的有效性与实用性。3、在机器人抓取系统标定方面,本文提出了一种机器人双臂基坐标系的标定方法,标定后双臂的精度为0.5210mm;提出了一种像素平面手眼标定方法以及一种点云空间手眼标定方法,手眼标定的精度为1.075mm;准确的标定结果为机器人抓取提供了可靠的数学基础。接着,基于上述算法开发了一款标定软件,集成了手眼标定与双臂标定,完成了标定过程的数据可视化,使得相机与机器人的标定环节简单可靠而且稳定易操作。4、在机器人多目标识别与抓取方面,首先运用所提出的Ho PPF与B-HPPF描述子和三维目标识别算法,实现了在点云空间中的多目标识别以及姿态估计;接着,基于简单二维图像信息,开发了高效的旋转点集投影的堆叠物体检测算法以及拟合射影坐标的形心校准算法,算法的平均运行时间为0.102秒,堆叠检测的运行成功率可以达到100%;然后,综合上述算法开展了多目标物体的机器人抓取研究,实验结果显示对于单目标物体、无堆叠物体和有堆叠物体的抓取成功率分别为:96.7%,97.8%与90%。
其他文献
电镀陶瓷基板(DPC基板)具有热导率高、线路精度高和可垂直互联等优点,广泛应用于发光二极管(LED)等功率器件封装。但是DPC基板制备工艺所采用的的光刻显影技术只能在平板上进行布线,此技术难以在围坝结构内部制备金属线路层,无法直接制备含围坝结构的DPC基板,无法满足LED器件气密封装要求。本论文围绕含围坝的DPC陶瓷基板制备展开研究。主要研究内容如下:1)陶瓷基片激光打孔表面处理。针对氧化铝陶瓷基
随着智能化设计的不断发展,传统设计领域也面临智能化改造的需求,依托计算机辅助设计技术在建筑电气设计等领域中进行智能化改造已成为新的趋势。为了解决电气布线人工设计存在耗时长、自动化程度低等问题,本文提出结合计算机辅助设计技术及图论模型实现电气布线自动化的思路,并就电气布线自动化关键算法进行以下研究:(1)深入分析电气设计中设备之间的连接、连接线路的布局以及布线的优化等问题,结合图论模型设计电气布线自
光伏玻璃是太阳能电池行业的关键组件,而玻璃打孔是提升其附加值的重要途径,玻璃的材料特性使打孔成为一项技术难点。在传统的加工方式中,机械打孔不仅效率低,刀具磨损严重,孔表面质量也难以满足玻璃生产工艺要求。基于此,利用激光加工的优异性能,针对光伏玻璃激光打孔自动化控制系统展开研究,设计可靠、稳定、性能良好的控制系统。首先从打孔机功能与性能需求入手,分析激光打孔工艺内容。提出打孔机机械系统方案,从生产线
立体视觉技术是移动机器人视觉领域的研究热点,对其发展具有深远的影响。移动机器人的视觉应用要求其视觉系统具有微小型、实时高速处理、高精度测量的特点。本文提出了一种基于FPGA(Field Programmable Gate Array)的机器人高速双目立体视觉技术,能够实时高速高精度地测量三维深度信息,具备自适应增益和曝光功能,能够很好的适应于移动机器人的视觉任务。具体研究工作如下:(1)研制了一套
货架穿梭车用于在货架间传送货物,实现仓储系统货物出入库自动化管理,其运动速度和定位精度直接影响自动化立体仓库的货物吞吐速率。本文围绕货架穿梭车高速条件下的定位精度这一关键技术问题开展研究,主要研究工作和结论如下:本文提出了穿梭车运动控制算法,以实现穿梭车在高速条件下的准确定位。采用S曲线规划穿梭车的速度参考曲线,双闭环控制跟随给定参考速度。设计了行走电机矢量控制算法,采用SVPWM技术在三相绕组线
近年来,以过渡金属硫属化合物(TMDs)为代表的二维材料因其较高的载流子迁移率、可调的带隙结构等特点受到了越来越多的关注。其中,MoTe2由于明显的双极性输运特性和弱费米钉扎效应,成为构建二维PN结型器件的理想材料,而~0.8-1.1e V的带隙范围也使其适于发展近红外光电子器件。然而,对于超薄的二维半导体,传统的离子束注入和扩散掺杂等方案容易产生晶格破坏,适用性较差。一直以来,人们致力于发展适于
近来,Bi2O2Se纳米片作为一种新兴的层状材料,其表现出超高的载流子迁移率(1.9 K下能达到~29000 cm2V-1s-1)、较窄的带隙(0.8 e V)和出色的空气稳定性,有望支撑未来高速光电子器件的进一步发展,引起了广泛的关注。然而,由于Bi2O2Se内多种空位缺陷表现为施主掺杂,使其本征呈现出较高的载流子浓度(1019-1020cm-3),导致光电器件中过高的暗电流问题。研究表明,利用
随着能源危机和环境危机愈演愈烈,各个行业都向节能环保、绿色可持续方向发展,汽车也由传统燃油汽车向新能源汽车转型,其中电动汽车发展最快,已经成为新能源汽车销量主力。动力电池是电动汽车能源供给中心,电池精确的荷电状态估计(State of Charge,SOC)是电动汽车长时间安全运行的保障。基于电动汽车中电池SOC估计的精度需求,本文以锂电池单体为研究对象,对锂电池模型和SOC估计算法进行研究。本文
由于传统化石能源日益枯竭及其对于环境的恶劣影响,人们对于清洁与可再生能源的需求日益增加,新能源行业飞速发展,大量新能源发电设备急需入网。传统的电网结构已经无法满足需求,智能电网成为维持新能源持续快速发展以及满足用户对于清洁、安全、高质量用电需求的最终解决方案。但智能电网规模的不断增长以及越来越多分布式电源的接入,给智能电网安全性、稳定性、可规划性带来了新的挑战。群体智能作为人工智能领域最为重要的方
泰勒库特流(Taylor-Couette,简称TC流)是存在于同轴并且相对转动的两圆柱面之间环形缝隙内的流体流动,TC流动模型具有结构简单,参数易控和流动系统封闭等特点,是研究流动稳定性和湍流的常用模式模型。当两圆柱面中心线存在偏心距时,因转子旋转产生动压效应,偏心缝隙内出现圆周压力分布,因而偏心泰勒库特流在阻力矩特性、流动形态变化和出现空化流等方面有别于同心泰勒库特流。本文将通过对比同心环形缝隙