基于卷积神经网络的机械臂有序目标抓取方法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:danielddy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
服务机器人在生活中的应用前景十分广泛,如保姆机器人、送餐机器人等,抓取是不同种类的服务机器人最基本的功能之一,因此研究机器人抓取是十分必要的。同时,与工作环境相对单一的工业机器人相比,服务机器人往往在非结构化的场景下工作,因此设计一款能够自主识别、自主抓取的机器人是十分必要的,而这也是目前机器人领域应用的热点和难点。本课题基于卷积神经网络的机器人抓取展开了研究,提出了一种改进的抓取检测与目标检测相融合的有序物品抓取方法,并搭建了基于UR5机械臂的抓取实验平台进行抓取实验,进一步验证了算法的有效性。首先,针对目前主流的深度学习视觉抓取算法普遍缺少目标检测模块,导致抓取是无序、不可控等问题,本文从卷积神经网络基本原理入手,详细分析YOLO系列不同版本目标检测的优劣,最终选择使用YOLOv5作为本课题的目标检测模块。其次,针对现有的用于目标检测的数据集大都针对大型物品检测,对本课题的生活常见物品抓取参考不大。因此,自制日常物品抓取的数据集并进行标注,并利用YOLOv5中轻量级的YOLOv5s模型,先在大型目标检测数据集上预训练,利用迁移学习的方法将预训练后的模型再日常物品抓取数据集上训练,最终得到了的模型m AP为99.5%,检测速度为66FPS。再次,针对现有级联抓取网络GGCNN模型抓取准确率较低的问题,采用逐步精细化的思想,将GGCNN封装成基本模块,通过多级架构,进一步提高了网络特征提取的能力,加速模型的收敛。同时在公开抓取数据集康奈尔数据集上训练和验证,得到了89%的准确率,比原GGCNN方法提高了13%,并将其结合YOLOv5目标检测,实现了有序抓取。然后,针对红外深度相机在某些点或区域,存在深度不可知的问题,提出了一种新的深度补全算法,结合双边滤波算法,完成了深度图的预处理,为验证抓取检测算法的可行性实验做好了准备。最后,采用了eye-in-hand结构搭建了机械臂夹爪和摄像头的机械臂抓取系统,真实的环境下进行了抓取实验,对于自制抓取数据集中的11种物品分别进行了抓取实验,抓取准确率达95%。
其他文献
传统的化学测定方法虽然结果准确,但是有着测定时间长、方法较为复杂的缺点,本研究对糜子冠层进行拍照来获取作物的冠层图像,以结合数字图像处理的特点,对采集到的叶片图像进行灰度、二值化等图像预处理和提取图像中的颜色特征值,分析叶绿素含量与颜色特征值之间的关系,并建立叶绿素含量预测模型;图像处理技术有着速度快、成本小、易操作的特点,且市面上缺乏一款预测叶片叶绿素含量的可视化软件,故对此展开研究。本文重点探
学位
[目的]高粱是世界五大谷物之一,具有很丰富的营养价值。高粱中的多酚对人体健康具有积极作用,且高粱是谷物中多酚含量最高的植物,本试验研究了甜杆糯米高粱中多酚类物质,用超声辅助乙醇提取其中的多酚类物质,对其提取物质进行分离纯化和组分分析,并进行微胶囊制备及性质研究,旨在得到纯度更高的高粱多酚以及其中明晰的多酚物质种类,为高粱多酚性质研究奠定理论基础。[方法](1)确定提取高粱多酚的最佳乙醇体积分数,然
学位
目的 探讨牙齿完全缺失对老年人认知功能的影响及社会参与的调节作用。方法 纳入中国健康与养老追踪调查(CHARLS)2013名60岁以上的老年人。采用简易精神状态检查、简明社区痴呆筛查进行认知功能评估,比较牙齿功能尚可、牙齿掉光佩戴假牙、牙齿掉光未佩戴假牙三组老年人认知功能得分的差异,使用多元线性回归(逐步回归法)进行多因素分析。结果 187人(9%)牙齿完全缺失者对日期、位置与地址、物品认知、行为
期刊
卵磷脂(Phosphatidylcholine,PC)是一类多功能的大分子活性物质,具有抗氧化、抗菌和降血脂等功能,对心血管疾病有预防作用。蛋黄卵磷脂(Egg yolk phosphatidylcholine,EPC)含量丰富,约占蛋黄总脂质的16-18%。研究表明,EPC能够改善高脂饮食引起的血清和肝脏脂质的积累,有助于消除肝脏氧化应激,改善肥胖和脂肪肝等相关疾病。然而相关调节机制仍不明确。因此
学位
小麦是我国重要的粮食作物之一,掌握冬小麦穗数是育种及农业生产中的重要农艺指标,随着深度学习技术的快速发展以及硬件算力的快速提升,深度学习中的神经网络技术被广泛应用于农业生产中,小麦麦穗计数方法也由人工计数逐渐发展为机器视觉计数,如遥感估产模型、作物生长模型、卷积神经网络模型等,卷积神经网络中的YOLO系列、RCNN系列、SSD系列等深度学习模型一直是小麦麦穗检测与计数方法的主要研究方向,YOLOv
学位
高光谱遥感的快速发展及广泛应用为实时、精确监测作物长势提供了技术支撑,但遥感卫星采集地面作物长势时并非都是垂直方向获取,多数情况下同样存在观测角度变化的问题。同时有研究表明,垂直于地面观测角度对植被冠层结构的提取并不完整,进而限制了对植被定量遥感的精度,因此,使用多角度遥感监测作物长势对确保我国粮食安全具有重要意义。连续小波变换拥有细致丰富的尺度空间,与多角度高光谱数据结合使用可以获取到更为丰富的
学位
粮食安全问题一直是国家重点关注的问题,2022年中央一号文件提出要牢牢守住保障国家粮食安全的底线。小麦作为我国三大粮食作物之一,对粮食安全具有重要的意义。黄土高原是冬小麦种植的重要区域,近年来全球气候变暖,冻害等极端气候事件频发与气候胁迫现象增加,给冬小麦的生产带来严重的威胁。本文采用黄土高原2000~2020年88个气象站点气温、降水数据与中等分辨率气候系统模式(BCC-CSM2-MR)模拟四种
学位
多足动物在各类地形中都表现出了极强的运动能力,它们能自由地选择合适的落足点,通过腿部适应性完成高效率运动。在多足动物的启发下,研发人员设计了多种具备类似运动潜力的足式机器人。其中六足机器人因具有更多的支链结构而具有更高的稳定性与更强的承载能力,能够在极具挑战性的环境和任务中发挥巨大作用。作为一个高维的非线性系统,六足机器人的运动控制设计与分析极为复杂,一直都是相关领域的重点研究对象。针对现有控制算
学位
报纸
我国是病虫害多发国家,病虫害的存在一直困扰着我国农业的发展。目前,我国农业病虫害预警监测手段还较为落后,仅依赖人工不能及时对病虫害发生时期进行预测,导致农产品产量降低和经济效益下降。清远市作为茶叶大市,当地茶园一直以来都遭受着病虫害困扰。为缓解这一状况,本研究结合物联网、数据库等信息技术,建立基于Vue框架的病虫害预警监测系统,以期提高茶叶病虫害预警监测效果。本文主要工作内容如下:1.构建系统数据
学位