基于深度学习的工业机器人抓取检测研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:yuanchonghuanca
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器人抓取技术是智能机器人的重要组成部分,在生产制造、物流、服务、食品、医疗等众多领域都有广泛的应用。随着机器人和人工智能技术的快速发展,机器人的智能化抓取已成为了学术界和工业界的应用与研究热点。目前AI+机械臂的结合模式为机器人提供了多种抓取技术解决方案,例如视觉伺服,深度强化学习抓取,抓取姿态生成,六维位姿估计等。不过,在多物体杂乱放置、可能存在部分遮挡、堆叠的分拣场景下,各算法的准确性,实时性,泛化性仍有待提高。为了解决上述问题,本文以抓取检测问题为研究对象,提出了一种基于Faster-RCNN改进的抓取检测网络,构建了智能机器人抓取系统,并进行了相关实验研究来验证网络和系统的有效性。首先,针对多物体分拣工作场景,建立了基于Kinect的机器人抓取系统框架,详细介绍了UR5机械臂和手爪等系统控制执行单元的结构与特点;并重点研究了Kinect视觉系统的构建,分析了RGBD相机标定,图像匹配及手眼标定的数学原理,并进行相关实验标定相机参数与确定机械臂与相机之间的相对坐标变换。其次,剖析了CNN网络各组成部分的技术基础,为之后的多任务抓取神经网络建立理论基础。针对多类别、多物体的抓取检测任务要求,建立了物体的抓取数学模型,构建了包含公开数据、自制数据的网络数据集,构造了一种基于Faster-RCNN改进的抓取检测网络,在其基础上增加旋转锚框和抓取检测任务分支;网络通过输入经过图像预处理的RGB图,输出物体类别和矩形抓取参数;经过测试,网络在公认评价标准下有良好的性能表现。最后,建立了包含硬件层、算法层、用户层的抓取系统的软件框架,为了实现在ROS平台下的仿真实验平台搭建,利用Solid Works导出系统各部件的URDF模型,配置Move It!轨迹规划库和移动组节点,配置Gazebo仿真环境和ros-control控制中间件,建立仿真、控制器、传输之间的连接关系,编写xacro建模文件,实现ROS和Gazebo的联合仿真;并分别进行物体的检测与抓取实验,在检测实验中,网络的预测准确率为90.6%,检测速度为8.22FPS;在抓取实验中平均检测准确率为90.5%,平均抓取成功率为83.2%,验证了系统的抓取可行性。
其他文献
目的探究膝关节炎(OA)患者血浆和关节液网膜素-1(Omentin-1),APJ的内源性配体(Apelin)和生长素(Ghrelin)与关节液中Ⅱ型胶原C端肽(CTX-Ⅱ)表达水平的关系,深入了解膝OA患者的
<正> 一、前言众所周知,选矿厂最大能耗的工序是破碎、磨矿,约占全厂总能耗的60%,其中磨矿所占能耗最多.因而正确地选择磨矿机,是关系到选矿能源能否合理使用的重大问
设计一种即可在光滑壁面也可以在粗糙壁面进行全方向移动的爬壁机器人。首先基于螺旋副原理设计本体移动机构,通过分层设计的方法实现机器人的转向,采用钩爪和吸盘结合的方式
随着人们生活水平的提高,农产品质量问题近年来逐渐成为人们日益关注的生活问题。如何在物流运输过程中保证农产品的新鲜程度和质量关系到人民生活质量和农业经济发展,近年已
为解决动态联盟的利益分配问题,论文建立了一个不完全信息条件下的讨价还价模型。用逆向归纳法解出了模型的理论均衡解,用数值方法分析了理论均衡解,并得到了实验均衡解。结
永磁同步伺服系统广泛用于工业运动控制领域,这一领域负载转动惯量的变化时常发生。负载转动惯量变化可能劣化伺服系统的速度响应性能,严重时造成系统不稳定。本文以保证伺服
一方面试图从叙事学的角度,探索叙事性思维给予设计领域的几点启示;另一方面从具体的实际案例出发,分析阐明叙事性思维在数字博物馆设计中的必要性。借助叙事性思维和叙事学
Altium Designer软件作为Protel 99SE和Protel DXP软件的升级版,功能更加强大,学习难度也有所提高。从Altium Designer软件建立五类重要文件入手,依次介绍了工程文件、原理图
目的本研究旨在探索甲状腺微小乳头状癌(PTMC)颈部区域淋巴结转移的危险因素,并构建预测模型。方法回顾性分析来自SEER(Surveillance,Epidemiology,and End Results)数据库及
在pH7.0的磷酸盐缓冲液中,葡萄糖氧化酶(GOx)催化葡萄糖与氧反应生成H2O2,在H2SO4介质中H2O2与I-发生氧化还原反应生成I2,过量的I-与I2生成I-3,I-3使阳离子荧光剂罗丹明6G位