基于卷积神经网络的机器人抓取方法研究

来源 :山东科技大学 | 被引量 : 0次 | 上传用户:wonkyman2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着当前社会工业智能化的发展,对传统的工业机器人产生了新的挑战,抓取是机器人的一项主要能力,而且机器人的抓取问题一直是国内外研究的一个热门。随着近年来深度学习技术的崛起,因为可以提取较好的特征而被应用于各个领域,国内外学者更是将其应用到了机器人的自主抓取任务中,机器视觉在近年来发展十分迅速,把机器视觉、深度学习和机器人相结合成为今后工业机器人发展的主流趋势。为此,本论文设计了基于卷积神经网络的目标检测模型,搭建了机器人自主抓取系统。首先,研究了卷积神经网络的主要组成部分。研究了基于滑动窗口的目标检测原理以及实现全卷积网络的办法。研究了 Faster R-CNN目标检测模型和YOLO目标检测模型的检测原理。对两种目标检测模型进行优化,对Faster R-CNN目标检测模型进行优化,对网络结构,锚的比例尺寸,目标分类和位置回归结构进行调整。对YOLO-v2目标检测模型进行优化,对Darknet-19特征提取网络结构,NMS算法预测框重叠置信度以及损失函数进行调整。然后,通过Kinect-v2相机对抓取物体进行图像采集,并用人工的方式扩充数据集。将得到的数据按5:1的比例随机分为训练集和测试集,将训练集中的图像利用LabelImg工具进行目标标注。对两种改进的目标检测模型进行训练和测试。分析了两种模型的训练损失,以及两种模型改进前后在测试集上的检测准确率和速度。最后,使用埃夫特机器人和Kinect-v2相机搭建实验平台。研究了物体的三维定位以及如何获得物体的抓取角度。对Kinect-v2相机利用张正友法进行标定,利用多个空间点的坐标对Kinect-v2相机和机器人进行手眼标定,分别得到相机的内参和外参。经过以上的研究和准备,进行了实验验证,使用三种颜色方块作为目标抓取物体,分别用两种检测算法进行多组实验。实验结果证明目标检测网络学习到了有效的图像特征,抓取系统可以基本完成自主抓取任务。
其他文献
近年来,我国移动支付已深入渗透到社会经济生活中,其态势快速发展,像支付宝、微信等创新层出不穷。中国银联是国内银行卡清算组织,将“云闪付”产品推了出来,试图在移动支付领域占有一席之地。2017年以来,为在便民领域推进银行业联网通用标准的移动支付的应用,中国银联与各发卡银行相结合,推出云闪付App。诚然,在发展中,银联云闪付有着利益参与方的市场竞争和微信、支付宝等造成的市场障碍的问题,所以,中国银联的
省第十二次党代会描绘了未来黑龙江全面振兴发展的宏伟蓝图,标志着黑龙江全面振兴开启新阶段,迈上新征程。在新一轮东北老工业基地振兴的号角中,作为一个百年历史国有特大型
生态足迹及生态承载力是表征一个国家及地区社会经济可持续发展的重要指标,同时也是对一个地区进行可持续发展程度定量测度的主要方法,其对当地生态环境保护及资源合理开发利
“一带一路”是横跨欧亚非三大洲的经济合作发展倡议,东边是经济活跃的东亚经济圈,西边是发达的欧盟经济体,“21世纪海上丝绸之路”就是从中国沿海港口出发,经南海过马六甲海
众所周知,任意一款新产品刚开发出来的时候都需要对其性能进行测试。只有测试后显示该产品的稳定性良好,方可以大量生产并广泛投入市场中。因此本文对一种新开发的实验用注塑
昭山位于长株潭三市几何中心,昭山的定位是三市的绿心,不允许有污染的工业进入该区域,只允许无烟产业的进入,尤其允许文化旅游产业进入。在这样一个政策背景下,昭山只能打旅游产业
报纸
中美两国有着非常紧密的航运贸易联系,中美贸易战引发了人们对中美集装箱航运网络和航运贸易的再思考。基于中美集装箱航运贸易数据、中美航线O-D数据和全球18家船公司的航线
目的:了解滨海新区产妇的产后避孕知识、态度、行为现状及再生育意愿,探究产后避孕认知水平、产后意外妊娠及有无再生育意愿的影响因素,为提升滨海新区妇女儿童保健和计划生育服务整合后的产后避孕服务质量提供参考,为探索“全面二孩”政策开放后医疗机构的应对支持措施提供依据。方法:本研究采用流行病学现况调查方法,选取2018年1月至12月期间在天津市滨海新区塘沽助产机构分娩的产妇,纳入标准为年龄18-45岁、在
随着社会物质需求的增加,人们对生产力的要求也大幅提高。目前机械臂已成为了生产加工过程中的重要辅助工具,因此对机械臂控制策略提出了新的要求。在生产中,由于传统机械臂大都只能按照设定好的程序执行任务,无法充分实现控制的智能化与协作化,因此如何提高机械臂的运行效率成为亟待解决的问题。本文基于六自由度机械臂,借助视觉信息,首先建立机械臂控制系统,进而对机械臂开展运动学建模、轨迹规划及避障策略等研究。论文的
随着智能化装备在工业生产中的广泛应用,如何更好地使用机器视觉技术为智能化装备增添一双“眼睛”,成为了一个热门的研究方向,拥有巨大的发展前景,也是国家高科技战略的重要方向之一。本文针对工业生产中流水线传送带上的动态目标抓取问题,选取Delta机器人为研究对象,设计基于视觉引导的分拣机器人。做了如下几个方面的研究工作:以Delta机器人为研究对象,研究了一种基于几何法的Delta机器人运动学分析方法,