面对目标物体抓取任务的控制方法研究

来源 :东北大学 | 被引量 : 0次 | 上传用户:bhf0520
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于深度学习的机器人抓取算法可以准确控制机械臂抓取小型物体,但是由于末端执行器尺寸的限制,仅仅靠一个机械臂不能准确抓取大型物体,必须依赖双臂协同操作抓取大型物体,这就需要利用体感交互技术完成此任务。通过体感交互技术,人体控制机器人只能完成大型物体的操作任务,对于相对较小的物体,由于体感精度的限制,其抓取成功率不是很高。本文采取通过遥操作的形式体感控制机器人抓取大型物体,通过深度学习的抓取系统抓取小型物体。本文的主要研究内容如下:(1)利用Kinect深度相机、Baxter机器人、电脑、路由器在机器人操作系统ROS下搭建完整的体感交互系统框架。通过Kinect获取人体的骨架信息,基于主题的通信方式,选择UDPROS协议将关节数据传送到电脑端,并设计一种混合滤波器对关节数据进行平滑处理,消除关节抖动现象。(2)利用机器人运动学D-H方法对机械臂和人体手臂进行建模分析,提出一种基于空间向量法计算出人体关节角度,并采取运动范围最大化策略进行角度映射,实现人机双臂运动传递,进行体感跟随实验验证系统的有效性。(3)建立基于深度学习的目标抓取系统。在Darknet深度学习框架下,采用YOLOv3的预训练模型在自己的数据样本中训练网络,分别在现实环境和虚拟环境中采集样本并通过LabelImg标注数据集,增强网络的学习能力,最终获取精度较高的YOLOv3目标检测网络模型。此网络模型可以准确获取目标物体的边界框位置信息,对虚拟Kinect进行建模分析,得到物体的三维坐标信息,通过机器人逆运动学求解关节角度,机械臂便可以执行抓取动作。(4)在虚拟环境下搭建完整的实验平台并进行抓取实验。通过体感交互系统,人体控制机器人双臂协同抓取尺寸较大的物体。通过深度学习的目标抓取系统,机械臂末端执行器准确抓取尺寸较小的物体。
其他文献
烧结生产操作参数的选择以及烧结设备的漏风影响着烧结过程的状态。烧结状态异常会影响烧结矿质量、产量以及资源的利用率,烧结过快会导致烧结机出现占用烧结轨道时间过长,导致烧结矿产量降低以及资源浪费,烧结过慢会出现烧结料未能烧完,导致烧结矿产量、质量降低,对钢铁厂各项经济指标的影响非常大。本文以国内某钢铁厂360m2烧结机为研究对象,分析其烧结过程传热传质机理,建立烧结过程数学模型计算出烧结烟气出口温度,
目前光学曲面超声研抛技术成为了国际研究的热点问题,这一技术原理是利用高频超声振动使悬浮液中的磨粒与工件表面产生碰撞,达到材料去除的目的。为达到更好的研抛效果人们开始研究如何结合机器人进行研抛,本文针对如何使用混联机器人进行研抛加工的关键技术开展研究,采用的是具备压力调节能力和开放式数控系统的混联机器人与设计的专用研抛装置。论文的主要研究内容包括:(1)建立了研抛混联机器人的三维模型,分析了混联研抛
折臂式自行走高空作业平台是一款多功能的高空作业设备,具有效率高、操作简单、运行平稳等特点,目前主要应用于高空维修、清洗与安装等场合。由于此款高空作业平台通过载人进行作业,所以必须要保证其安全性,并且在满足安全性的前提下,还要使其结构更加经济合理。因此,针对折臂式自行走高空作业平台强度与结构优化分析的理论方法展开探讨对推动我国高空作业平台的发展具有积极意义。本文从A45折臂式自行走高空作业平台的力学
转载系统作为输送机的重要组成部分,在其工作过程中由于物料的冲击和破碎所带来的粉尘污染是一个很严重的问题。物料在转载系统内的流动是一个散状物料和空气、粉尘相互作用的复杂力学过程,单纯使用离散单元法或运用流体力学的知识并不能完全描述转载系统内的运动状态,因此需要使用DEM-CFD耦合的方式来研究粉尘的运动状态。转载系统中的物料运行稳定以后,粉尘颗粒在重力作用下会进行不同程度的沉降,而粉尘具体的运动状态
随着科学技术的不断发展,高新技术产业对高精度表面的要求也越来越高。传统的表面抛光方法如机械抛光、化学抛光、电化学抛光等,或抛光力不易控制,或抛光精度较低,因此很难满足各种高精度表面的要求。磁流变抛光是一种新型的表面抛光技术,它基于磁流变抛光液的流变特性,在工件表面形成“柔性抛光膜”,通过改变磁场强度的大小实现对抛光力的控制,进而对工件表面进行抛光。磁流变抛光液是由磁流变液演变而来,其性能是影响磁流
激光熔覆技术摆脱了模具与刀具的限制,只需将三维数据文件导入到设备的控制系统中,利用激光、粉末输送系统逐层堆积材料,便可以制造出致密的金属零件。其因能够缩短制造周期,简化加工薄壁件的制造工艺,节约材料,广泛的应用于难加工金属、复杂异形薄壁件的直接成形制造和修复中。激光熔覆成形薄壁件的过程中,工艺参数与熔池温度严重影响着薄壁件的尺寸与性能,本文以Fe313粉末为熔覆材料,45号钢为基体材料,对薄壁件成
近年无人飞行器的蜂涌而至,开辟了旋翼无人机在多个复杂领域的应用。而工程环境对飞行器的稳定性、可靠性提出了高标准的要求,尤其机械振动会对测量单元产生负面影响,因此振动等级是飞行稳定性的一个关键指标。油动多旋翼无人机发动机的振动及螺旋桨产生的不平衡力易导致检测元件不良扰动,将直接导致测试数据偏差,进一步地影响飞行控制器的信号处理,造成飞行失稳,甚至结构破坏。因此,为保障旋翼无人机稳定飞行,解决飞行器在
下肢外骨骼机器人是一种需要与人体结合帮助人体行走的仿生机器人。本文吸收学习了前人在外骨骼研究上的成果,自主对于人体步态特征进行了研究,根据研究中发现的人体步态规律,设计了一款新型机械结构的双腿下肢外骨骼,并对行走稳定理论进行研究,主要研究内容有以下几项:(1)外骨骼机器人机械结构的设计与加工制作。运用CAXA电子图板,SolidWorks,设计外骨骼机器人二维和三维图纸。选取合适的关节电机和谐波减
近些年来,硝酸盐作为水环境污染的主要来源,已经成为影响环境质量和人体健康的危险因子,故对水体硝酸盐氮的去除已经刻不容缓,如何安全、高效的脱氮已经成为了现代水处理技术的研究热点。目前硝酸盐的去除方法主要有物理法、化学法、还有生物法。其中以硫磺为电子供体的硫自养反硝化系统因产泥量少、无需外加碳源、操作简单、运行管理费用较低等特点而逐渐成为各国研究学者的研究热点。传统的硫自养反硝化过程中所使用的填料均是
在工业生产当中,串联机器人已经得到了广泛的应用,但是工业机器人在使用过程中,由于零部件相互磨损以及在工作过程中受外力作用等,使得机器人极其容易发生故障,而一旦发生故障,末端执行机构便会产生动作畸变,加工时的位置姿态便会产生异常变化,轻则影响加工精度,严重时造成严重损失。因此,本文主要测试机器人运动时的加速度与角速度信息进行故障诊断研究。本文主要完成了以下几个方面的工作:(1)基于STM32与MPU