基于3D视觉的机械手拆垛系统研究

来源 :天津科技大学 | 被引量 : 0次 | 上传用户:zm4910588
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国经济增量与科学技术的飞速发展,工业现场自动化、智能化程度越来越高,对于工业生产效率的要求也日趋增长,由自动控制来代替人工人力是我国工业发展的必然趋势。在我国每年工业生产线都要运输上百亿吨箱体货物,而如此大体量的市场,很多工业环境仍然以人工集中搬运为主。为了提高生产效率,很多企业引入了KUKA(库卡)、FANUC(发那科)、ABB等拆垛机器人,但是由于其大多为固定线路固定抓取点的拆垛机器人,所以工业环境中还是需要人工来摆放箱体,整理垛型,大大影响了生产装运速度。因此,研发一种可以解决抓取工业现场无序摆放的箱体的拆垛机器手,已经成为当今工业形势下亟需解决的问题,并且可以将目标识别算法进行泛化,大大降低并联机器人的成本问题。(1)根据系统的功能需求完成了拆垛系统的硬件搭建,从上位机到下位机,介绍了每个硬件选型的理由、硬件的特点、系统中发挥的功能以及具体的参数。(2)基于深度学习将Mask R-CNN目标检测模型的应用于箱体识别系统中,主要进行了根据Real Sense 3D相机采集到的箱体无序位置摆放下的彩色图像,并将这些图像进行标注,训练用于自己的Mask R-CNN目标检测模型等准备工作,建立基于Real Sense 3D相机与机器手之间的手眼标定、坐标系转换以及机器手运动控制系统,可以很好完成机器手识别抓取任务的实现。(3)将Mask R-CNN目标检测系统、Real Sense 3D相机标定坐标系转换系统与机器人运动控制系统进行有效集成,并实现上下位机的通讯,系统人机交互界面的设计,使整个系统可以完成从相机获取彩色图像和深度图像,到驱动机器手完成箱体抓取的任务,并且具有良好的检测效果,实现了复杂无序垛型中对单个箱体的有效定位,解决了工业生产中不同箱体形状不同摆放位置的箱体识别问题。本系统已经于2019年3月在天津日博工业技术有限公司使用,并且投入一些大型药企如天津北辰天士力、天津武清红日等工业现场实际测试使用,通过实际的箱体抓取拆垛证明,基于深度学习的目标识别定位抓取系统人机交互能力表现较好,抓取精度较高,设备操作简易,可以应用于复杂无序的工业运输箱体环境中,在不同环境下仍然可以稳定运行,极大地提高了日常生产运输效率。
其他文献
随着隧道盾构技术的快速发展,双护盾TBM作为一种新型、先进高效、智能化的专用于地下隧道工程的超大型隧道施工设备,其应用范围和技术水平得到不断发展。双护盾TBM凭借自身独特的设计,可以灵活地运用在软硬岩地层中,且可以有效地解决小半径转弯隧道问题。目前,双护盾TBM缺乏较好的测量系统来实时测量前盾体与支撑盾之间的相对位姿,尤其是在强振动和强干扰的情况下,对于前盾体姿态的测量上更是一个待解决的难点问题。
学位
近年来,基于深度学习的目标检测算法利用卷积神经网络出色的特征提取能力,在众多计算机视觉任务的检测准确率远超传统目标检测算法。随着对精度的要求以及检测模型的复杂度不断提高,目标检测网络模型的参数量、计算量急剧增加,限制了其在资源受限的嵌入式设备等平台的应用,如何在保证网络性能的同时实现目标检测网络轻量化具有重要意义。因此,本文研究目标检测网络模型的轻量化方法,对目标检测网络进行压缩和加速,主要研究内
学位
随着近几十年来电力电子技术的发展,多相电力变换器在交流变频调速系统中的应用优势逐渐展现出来。三相-五相双级矩阵变换器是一种性能优良的新型电力变换装置,在多相电力变换器的发展中具有很大潜力。本课题以三相-五相双级矩阵变换器为研究对象,对其拓扑结构、控制策略、共模电压降低及五相电机调速系统应用进行了详细的研究。在拓扑结构上,从矩阵变换器的基本结构和调制原理开始研究,分析了不同约束条件下三相-五相双级矩
学位
随着制造业强国战略的第一个十年行动计划被实施,中国政府提出了《中国制造2025》。《中国制造2025》指出要加快机械、电子、航空、船舶、汽车、轻纺等行业生产的智能化转型,提高精确制造,敏捷制造能力;统筹布局,推动智能交通、智能家电、服务机器人等产品研发和产业化,提出关键工序智能化、关键部位机器人替代,生产过程智能化控制。智能自动化生产线是智能制造的基础之一,而机器人是自动化生产线所必备的设备。本文
学位
生物气溶胶的存在时刻影响着人类的生存环境、生产活动甚至生命质量。迅速而准确地对生物气溶胶分布进行测量可以有效获知病源微生物特性,为制定微生物传染源消杀措施提供理论依据。传统的生物气溶胶测量方法多为定点测量,在对高危险区和复杂环境进行生物气溶胶测量时,定点测量方法很难快速和准确地反馈生物气溶胶的实际存在情况。为满足室外立体空间高效生物气溶胶实际测量要求,本论文结合当下发展迅速、应用前景广泛的旋翼无人
学位
随着新一代信息技术的发展,我国的草原畜牧业结构开始从传统方式向着现代化、集约化、规模化的方式转变。在采用现代方式规模化养殖时,牲畜密度相对较大,这就对草场环境质量和草场资源的利用提出了更高的要求。草场环境监测作为草原畜牧业中非常重要的一部分,它既是影响畜牧工作的重要依据,又是保护草原环境的重要一环。若环境恶化会导致牲畜生病死亡,不仅造成巨大经济损失,还会引起多种传染病,间接危害人类的健康。因此,开
学位
随着社会经济的快速增长,城市建筑越来越密集,结构越来越复杂,导致火灾隐患越来越多,火灾的数量逐年上升。火灾事故不仅造成巨大的经济损失、威胁人民生命健康,还影响社会的稳定和发展,因此火灾报警在消防系统中至关重要。针对火灾环境消防参数的采集、传输、存储及远程平台监管的问题,本文结合物联网技术、传感器技术、无线传输技术等,提出一种基于物联网的消防监测系统。本文以室内火灾相关参数为监测对象,采集室内的烟雾
学位
地震检波器是石油资源勘探工作中接收地震波的传感器,其性能优劣直接决定了勘探工作的质量。地震检波器的自然频率、阻尼、灵敏度、直流电阻等直流参数的测试技术已较为成熟,而交流参数失真度的测试易受噪声干扰,导致精度较低。本文针对检波器失真度参数展开研究,设计了基于STM32和μC/OS-Ⅲ的高精度、多频率检波器失真度测试仪。检波器失真度测试仪系统由下位机软、硬件设计部分和上位机软件设计部分组成。下位机硬件
学位
铌酸锂晶体具有优良的声光、压电以及非线性光学特性,其中Y切铌酸锂具有较高的机电耦合系数,可以有效地激发声表面波,因此是制作声光制器的首选切向之一。另一方面,利用薄膜结构可以更好地限制声表面波的传输。因此,在铌酸锂薄膜材料上制作波导声光调制器,不仅可以充分利用材料的性能,还能利用结构的优势进一步提高器件的调制效率,降低插入损耗。本课题针铌酸锂薄膜光波导声光调制器进行了一系列理论和实验研究,所获成果具
学位
土工合成材料是土木工程应用的合成材料的总称,被广泛应用于公路、水利、环保等多个领域,在各领域的工程中发挥着日益重要的作用。为了保证工程的质量与安全,土工合成材料产品的性能检测尤为重要。课题对土工合成材料直剪拉拔试验机进行研究,以伺服驱动系统替代传统试验机中的液压或砝码装置作为加荷装置,在此基础上设计一种便捷的、高精度的、自动化程度高的直剪拉拔试验机检测与控制系统,实现对土工合成材料的直剪摩擦特性和
学位