基于深度学习的机械臂抓取位姿检测方法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:ppmeng
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
智能化机器人作为全新的机器人形式,有望代替人类在未知环境中执行耗时、高强度和危险任务。搭载末端夹持器机械臂抓取技术研究面对结构化环境、单一已知目标的抓取已取得重大进展和应用。然而目前很多工作场景中环境未知、工作目标形态各异,且易受到环境光照变化、物体遮挡等影响,要求机器人抓取系统拥有较高的自主性和鲁棒性。本文利用深度学习技术强大的知识迁移和非线性拟合能力,对卷积神经网络在夹持器抓取位置和姿态检测上的应用进行探索。本论文深入研究机械臂抓取系统流程及抓取表示方法,基于卷积神经网络设计了两种机械臂抓取位姿自主检测方法,完成了面对未知环境、陌生目标的机械臂自主抓取流程,主要研究内容包括:首先,设计了机器人抓取场景和抓取流程,讨论了机械臂末端夹持器在三维场景中对物体的抓取位置和姿态在二维图像上的表示;其次,采用卷积神经网络完成对夹持器抓取位姿的端到端检测。设计了一个卷积网络模型,得到合适的物体抓取中心位置。随后基于抓取中心位置,采用启发式搜索方法得到抓取角度和夹持器张开宽度。在康奈尔数据集上进行了训练测试,得到了87.5%的抓取检测准确率。再次,针对以整幅图像作为输入的端到端方法,背景信息以及无关物体信息对抓取检测会造成干扰的情况,训练了一个可抓取物体目标检测模型。目标检测过程给出了深度相机场景中待抓取物体的大概位置,既帮助减少场景中背景和无关物体对抓取检测的影响,又缩小了抓取分析的图片范围。并且目标检测给出了场景中各个可抓取物体的分类标签,有助于进行复杂有序抓取任务的规划;最后,利用上一环节目标检测的输出特征设计了一种两阶段快速抓取检测方法。考虑了抓取检测准确性和检测速度的权衡,结合目标检测模型输出和区域分析方法的特点,提出了一种两级抓取检测卷积神经网络。在康奈尔数据集上进行了训练测试,得到了92.8%的检测准确率和1.1169s的检测速度。在取得较高抓取成功率的同时兼顾了机器人抓取系统要求的实时性。
其他文献
生态足迹及生态承载力是表征一个国家及地区社会经济可持续发展的重要指标,同时也是对一个地区进行可持续发展程度定量测度的主要方法,其对当地生态环境保护及资源合理开发利
“一带一路”是横跨欧亚非三大洲的经济合作发展倡议,东边是经济活跃的东亚经济圈,西边是发达的欧盟经济体,“21世纪海上丝绸之路”就是从中国沿海港口出发,经南海过马六甲海
众所周知,任意一款新产品刚开发出来的时候都需要对其性能进行测试。只有测试后显示该产品的稳定性良好,方可以大量生产并广泛投入市场中。因此本文对一种新开发的实验用注塑
昭山位于长株潭三市几何中心,昭山的定位是三市的绿心,不允许有污染的工业进入该区域,只允许无烟产业的进入,尤其允许文化旅游产业进入。在这样一个政策背景下,昭山只能打旅游产业
报纸
中美两国有着非常紧密的航运贸易联系,中美贸易战引发了人们对中美集装箱航运网络和航运贸易的再思考。基于中美集装箱航运贸易数据、中美航线O-D数据和全球18家船公司的航线
目的:了解滨海新区产妇的产后避孕知识、态度、行为现状及再生育意愿,探究产后避孕认知水平、产后意外妊娠及有无再生育意愿的影响因素,为提升滨海新区妇女儿童保健和计划生育服务整合后的产后避孕服务质量提供参考,为探索“全面二孩”政策开放后医疗机构的应对支持措施提供依据。方法:本研究采用流行病学现况调查方法,选取2018年1月至12月期间在天津市滨海新区塘沽助产机构分娩的产妇,纳入标准为年龄18-45岁、在
随着社会物质需求的增加,人们对生产力的要求也大幅提高。目前机械臂已成为了生产加工过程中的重要辅助工具,因此对机械臂控制策略提出了新的要求。在生产中,由于传统机械臂大都只能按照设定好的程序执行任务,无法充分实现控制的智能化与协作化,因此如何提高机械臂的运行效率成为亟待解决的问题。本文基于六自由度机械臂,借助视觉信息,首先建立机械臂控制系统,进而对机械臂开展运动学建模、轨迹规划及避障策略等研究。论文的
随着智能化装备在工业生产中的广泛应用,如何更好地使用机器视觉技术为智能化装备增添一双“眼睛”,成为了一个热门的研究方向,拥有巨大的发展前景,也是国家高科技战略的重要方向之一。本文针对工业生产中流水线传送带上的动态目标抓取问题,选取Delta机器人为研究对象,设计基于视觉引导的分拣机器人。做了如下几个方面的研究工作:以Delta机器人为研究对象,研究了一种基于几何法的Delta机器人运动学分析方法,
随着当前社会工业智能化的发展,对传统的工业机器人产生了新的挑战,抓取是机器人的一项主要能力,而且机器人的抓取问题一直是国内外研究的一个热门。随着近年来深度学习技术的崛起,因为可以提取较好的特征而被应用于各个领域,国内外学者更是将其应用到了机器人的自主抓取任务中,机器视觉在近年来发展十分迅速,把机器视觉、深度学习和机器人相结合成为今后工业机器人发展的主流趋势。为此,本论文设计了基于卷积神经网络的目标
本文根据电梯轿厢通风的现状和未来发展情况,鉴于实际工程中轿厢通风存在的问题,以某电梯公司的典型电梯轿厢通风为研究对象,以广州市的室外通风条件为依据,根据电梯运动的特