基于深度学习与机器视觉的装配机器人关键技术研究

来源 :青岛科技大学 | 被引量 : 2次 | 上传用户:meisck
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
装配作业决定着产品的质量水平、工作性能和后期维护难易程度等一系列属性,所以在制造业体系中占据着重要地位。对比人工操作的流水线装配作业,装配机器人具有作业稳定性高和生产效益高的巨大优势,目前装配机器人控制方式仍以示教或离线编程为主,系统的灵活性较差、示教工作量较大以及对不同零件尤其是堆叠遮挡零件的识别定位准确率较低。针对上述问题,本课题将深度学习、机器视觉与装配机器人结合使用,提高了装配系统对不同零件的识别定位准确率,对促进未来装配机器人高速化和智能化地发展具有重要理论研究价值。本文针对基于深度学习与机器视觉的装配机器人关键技术研究如下:(1)论述了工业机器人自动化装配作业中零件识别定位工作的重要性,选用五种常见工业零件作为识别定位的目标,通过分析待识别零件的两种来料情形以及结合实际生产效益,针对零件无堆叠遮挡的情形,选用基于模板匹配的方法进行研究,针对零件存在堆叠遮挡的情形,选用基于深度学习的方法进行研究。设计并搭建了基于单目视觉识别定位的装配机器人系统平台,完成了对机器人模块和视觉模块的设计和选型,使用张氏标定法获取单目视觉成像模型中的相机参数,并使用九点标定法建立本文所选直角坐标机器人与单目相机的坐标变换关系。(2)针对无堆叠遮挡情形下的零件识别与定位,选取螺母和两种定制垫圈作为研究对象,提出的改进Retinex增强算法解决了螺母边缘低对比度问题,使用改进双边滤波能够较好地平滑零件图像,对PIO算法进行改进并将其应用于快速求取阈值分割的最优阈值,为后续提取和匹配垫圈零件轮廓特征做准备。选用性能稳定的基于Hu矩轮廓匹配方法实现了对两种垫圈的准确识别,并根据两种垫圈的结构特性设计了相应的位姿确定方法,最终可求解得到不同垫圈对应的质心坐标和旋转角度。(3)针对存在堆叠遮挡情形下的零件识别与定位,采用深度学习目标检测中的YOLO算法进行处理,通过分析算法不同版本的改进和不足,最终基于最新的YOLOv5算法进行研究和改进。针对YOLOv5算法如何在保持检测精度不变情况下实现降低网络模型的参数量和运算量的问题,使用基于Ghost Net的网络模块对其进行轻量化改进;针对YOLOv5算法检测堆叠遮挡零件的性能仍存在欠缺的问题,引入混合域注意力机制CBAM和改用滤除准则更为友好的DIo U-NMS对其进行感受野和预测框方面的改进。通过在自制零件图像数据集上对改进前后的算法进行训练和测试,发现本文改进算法在轻量化网络模型的同时仍较原始算法在m AP上有1.2%的检测精度提升,最终能够在模拟的不同来料情形下实现准确的零件检测。(4)针对目前公开数据集中有关工业零件的图像数量较少的问题,通过网络收集了2243张常见工业零件的图像,然后自行制作了包含有螺母、螺栓、垫圈、齿轮和联轴器的零件图像数据集,为进一步提高零件图像的色彩丰富性和位姿丰富性,使用基于仿射变换和色彩变换的数据增强方法将自制零件数据集扩增到7200张。通过扩充数据集,本文提出的改进YOLOv5网络模型在训练时没有出现过拟合现象,并有效保证了训练得到的网络预测模型的检测精度。(5)使用C#Winform程序结合OpencvSharp视觉库对系统上位机软件进行界面设计和算法封装,完成了相机模块、标定模块和零件识别定位模块的开发,最终利用矩阵关系将零件图像处理结果变换为机器人坐标,对零件的定位精度可达0.25mm。使用改进YOLOv5算法对采集的包含不同零件的测试集进行检测,实验表明,检测模型对堆叠遮挡零件测试集的平均识别准确率能够达到83.8%。
其他文献
全面预算作为企业管理的一个重要工具,是以战略目标为导向,通过数量、货币等对企业未来的经营成果进行控制,优化管理企业的生产活动。如何利用全面预算管理帮助企业进行战略决策和价值提升成为企业管理重要的研究课题。传统预算过于关注经营细节,造成预算与总体战略目标脱节。重结果轻过程,导致预算松弛。预算管理未与绩效考核结合,导致预算控制不力。在实践中如何构建一套“上接战略,下接绩效”行之有效的全面预算管理模式,
学位
清洁能源存储与转换器件的开发和使用对于社会的可持续发展至关重要。锂/钠离子电池作为典型的能源存储与转换器件,需要进一步提升其能量密度、功率密度,同时降低其生产成本来满足大规模储能应用的需求。在锂/钠离子电池中,负极材料对其性能起着非常重要的作用。目前,商业化的锂离子电池石墨负极材料因其较低的理论比容量、较差的倍率性能不能满足高功率、高能量密度的需要;同时,钠离子电池使用石墨作为负极材料时表现出较差
学位
深水采气树笼套式节流阀是深水油气开采的关键装置之一,现场常采用笼套式节流阀进行调压和调产,笼套式节流阀的性能直接影响生产安全、效率及成本。深水采气树笼套式节流阀长期运行在深水环境,其现场操控培训需在海洋平台上进行,不仅受环境、场地、工况等限制,培训成本高,而且存在安全隐患。利用虚拟现实技术,结合实际生产数据,不仅可以对实际中难以重现或者具有较高危险性不能重现的突发事故进行模拟,克服时间和空间限制,
学位
生物特征识别技术一直是社会安全领域的关注热点,目前全球受疫情肆虐,常见的生物特征识别技术也受到相应影响,虹膜识别技术以非接触性、高准确性和高安全可靠性的绝对优势,在众多生物特征识别技术中脱颖而出。虹膜识别技术在日常生活中并不常见,主要原因有三:成本高、便携性差、识别速度慢,针对上述问题,本文研究出一种基于Linux的虹膜识别系统,克服了传统基于PC机的虹膜识别系统的缺点,为虹膜识别技术走进生活跨出
学位
随着中国制造2025的推进,随着职业教育的发展,机器人相关的教育产品迎来了前所未有的历史发展机遇,在这一轮发展机遇中,无论是国内外机器人厂家还是集成商和培训机构,各方势力都在努力发挥着自己的优势,势必在这一历史浪潮中分得一杯羹。而同样在这样的历史特殊时期,如何开发职业教育领域的教育产品,也是所有人都在思考的一个问题。本文以Q公司教育产品开发策略作为研究对象,从产品开发策略的制定依据、产品开发策略的
学位
脑肿瘤是脑部常见的多发病症,其中,胶质瘤是最具侵蚀性的恶性脑肿瘤之一,严重危及患者的生命。因此,基于医学图像分析的早期诊断和治疗尤为重要。在各类医学成像技术中,用于人体内部多模态成像的核磁共振成像技术(Magnetic Resinance Imaging,MRI)是常用的医学诊断工具之一。然而,仅靠医生手动将各个模态结合并完成精细分割耗时耗力,如何有效对脑肿瘤进行自动分割成为重要的研究内容。基于深
学位
融资担保行业作为集中为中小企业缓解资金困境的金融企业类别,其对于缓解中小企业质押不足的困境、实现商业银行等机构实现风险转嫁和多主体的风险共担具有显著价值,其更是企业逐步建立分级风险管理机制过程中不可或缺的主体。但是,基于我国融资担保业务的阶段性制约和金融混业经营的监管制约,融资担保企业在当前发展阶段中依旧面临着多重困境。风险管理作为金融业现阶段发展中确保稳健经营和持续发展的关键因素,其对融资担保行
学位
传统房地产行业经过二十余年的跨越式发展,大规模消耗土地资源的开发方式已越来越难以为继,尤其是在土地资源非常紧缺的深圳特区,房地产企业如何更有效地获取并切实盘活土地资源,如何进一步优化空间利用,维持房地产行业的健康、可持续发展,是当前整个行业所必须面对的严峻挑战之一。在新形势下,房地产企业通过对存量土地的二次开发利用的方式已经变成一个常态化手段。具体落位到深圳来看,“以市场主体运作为主,政府支持鼓励
学位
随着我国综合国力不断增强,我国消费者的消费逻辑也逐渐发生了转变,从物质型消费需求、改善型消费需求逐渐转变为服务型消费需求。如何圈定精准用户群体并且用恰当的营销方式抓住用户的心,成为当下每一个公司企业面临的难题。Y公司所在的随身Wi-Fi行业在享受新兴行业红利的同时也面临着营销策略转型的困境。Y公司成立于2014年,是一家提供全球上网解决方案的新兴科技型公司,主打产品是一款可在全球100多个国家上网
学位
智能视频监控产品作为公共安全的重要保障是伴随着大众安全意识不断提升的基础上发展起来的,经济的发展推动了智能视频监控产品应用于众多社会领域,行业发展已经日趋成熟和稳定,但其市场环境却更加复杂化,成为众多企业争夺的市场领域,智能视频监控产品行业市场竞争呈白热化。因此智能视频监控产品企业不断优化市场营销策略以期在企业激励竞争中赢得一席之地。本研究针对QH公司智能视频监控产品市场营销进行了研究采用了文献研
学位