基于关键点投票的机器人抓取方法研究

来源 :江苏科技大学 | 被引量 : 0次 | 上传用户:xjfox1986
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于视觉的机器人抓取工作是目前计算机视觉研究在实际生活中的重要应用之一,已经广泛应用于垃圾分拣、工业零件加工、快递物流传输等方面。相比传统算法成本高且耗时长的问题,基于深度学习的机器人视觉抓取方法在确保高检测速度的同时,也减少了成本,且具有较高的准确度,体现出很高的实用价值。本文对基于深度学习的机器人视觉抓取方法中的物体位姿估计技术,与目标识别技术展开了相应研究,针对传统机器人抓取算法成本高、位姿估计准确率低、在极端场景中鲁棒性差等问题,提出了新的解决方案,并进行了实际的抓取实验验证。在物体位姿估计算法方面,本文提出了一种基于单视图关键点投票的机器人抓取方法。通过网络学习,在RGB图像上利用投票推理的方式提取关键点信息,同时使用最远点采样算法提取物体三维模型表面上的关键点特征,两者结合计算得到物体在相机坐标系下的位姿信息。然后手眼标定,确定相机与机器人之间的位置关系。最后将网络输出的物体位姿信息转化为便于机器人理解的抓取姿势,实现物体的准确抓取。该方法仅依靠单视图即可完成信息获取,并且由于采用了投票推理的机制,对物体被遮挡、截断等场景也能较为准确地预测出位姿信息,体现出较好的鲁棒性。通过机器人抓取实验证明,该方法能够达到预期目标,抓取成功率达到了94%,能引导机器人实现准确抓取。在目标识别算法方面,本文提出了一种基于实例分割的同类多目标机器人抓取方法。针对机器人抓取应用中常出现的同类多目标的摆放情况,本文受实例分割网络Mask-RCNN的启发,在网络进入位姿估计分支前,加入了一个二维检测模块。首先通过主干网提取多尺度特征图,再送入RPN网络筛选出包含目标物体的感兴趣区域,接着使网络聚焦于这些感兴趣区域,对其中物体进行检测、分类、分割和位姿估计等任务。由于导入了二维检测器,使网络能在同类多目标情形下,准确输出所有目标的识别与位姿估计结果;同时感兴趣区域的机制也让网络更集中于存在物体的局部区域,提高了网络输出结果的精度。最后的抓取实验证明,该方法能够切实解决同类多目标情形下所有物体的准确抓取。
其他文献
脑疲劳作为一种日益普遍的现象,不仅威胁着人们的身体健康,更威胁着人们的人生命财产安全,尤其近年来,由疲劳引发的驾驶安全事故频出。因此,及时有效地对脑疲劳进行检测和预警,对提高工作效率,保护人们的健康安全具有极其重要的意义。脑电信号更能直接反映大脑皮层疲劳状况,而提取的脑电特征是否有效,将直接性地影响疲劳的检测效果。所以,为了更高速有效地检测出疲劳的发生,本文对脑电疲劳检测应用中多个特征提取方法的有
学位
报纸
碳纤维复合材料具有质轻高强、耐热耐磨耐腐蚀等优点,进而成为复合材料领域中研究和应用的增强材料之一。其中碳纤维发挥着阻裂增韧的重要作用,用于碳基和混凝土基体的多孔隙基体材料中可显著增强复合材料的力学性能。复合材料的性能增强和最终破坏仅为宏观表现,其纤维的作用机制、各组分的受力损伤演变则缺乏对应研究,所以需要运用细观力学的方法探究损伤拓展和失效机理,并做出有效预测。因此,针对贯穿型长碳纤维增强碳基、混
学位
原位自生钛基复合材料较传统钛合金有着更高的刚度和强度、更加优异的耐磨性和耐腐蚀性能,广泛应用于航空航天等领域。激光熔化沉积可以在构件制造过程中实现材料组分的调配并可实现快速成型,加快了复合材料的设计过程,非常适合于制备复合材料。本文使用行星球磨机制备了Ti6Al4V-B4C复合粉末,通过激光熔化沉积分别制备了(TiB+TiC)/Ti复合材料和Ti6Al4V钛合金以作对比,研究了增强相对复合材料的显
学位
本研究在Co-6Ti-11V基高温合金的基础上,加入不同含量水平的W、Mo、Cr、Mn和Nb五种难熔元素(文中元素含量均为原子百分比),利用XRD、SEM、TEM、DSC和高温压缩等测试和表征手段,研究了这五种难熔元素对Co-Ti-V系高温合金γ′相形貌和大小、γ/γ′两相晶格错配度、元素在γ/γ′分配行为、γ′相溶解温度以及合金的高温强度的影响。主要研究结果如下:在Co-6Ti-11V基体合金中
学位
在“双碳”背景下,我国已将燃料电池技术列入十四五能源领域科技创新规划中。氢气作为燃料电池的理想燃料在制备、运输和储存方面都面临着许多挑战。与氢气相比,甲醇具有来源广泛及储存运输方便的优势。因而直接使用甲醇为燃料的固体氧化物燃料电池(简称甲醇SOFC)受到了各国学者越来越多的关注。然而,积碳问题阻碍了甲醇SOFC的发展。本文针对直接甲醇管式SOFC的积碳问题设计了一种多孔内管结构,并对其进行了详细的
学位
报纸
在石油化工、塑料、制药和食品加工等行业的生产过程中会产生大量的难降解有机污染物,这些有机污染物具有难降解、稳定性强等特点,被排入到水环境中会对生态环境造成破坏。高级氧化技术是去除水中有机污染物最有效的方法之一,基于硫酸根自由基(SO4·-)的高级氧化技术因其成本低、操作简单和效率高等优点而受到国内外研究者的广泛关注。在众多活化过氧单硫酸盐(PMS)的方法中,过渡金属活化法是应用最为广泛的一种方法。
学位
报纸
学位