基于深度学习的工业零件分割与位姿测量算法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:y286491357
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着深度学习技术的蓬勃发展,越来越多的场景可以使用到深度学习技术来达到自动化、智能化的操作,以此减少人工成本。而在生产制造和物流行业有着广泛应用的拣选系统更是走在利用深度学习技术的前列,拣选系统中主要涉及的深度学习任务包括目标检测、实例分割以及位姿测量等。目前各大研究机构与各大高校都对拣选系统提出了自己的解决方案,但是,在工业场景下,对于摆放杂乱、纹理特征少、遮挡严重的工业零件,各算法的准确性却有待提高。因此,本文将以工业场景下的智能拣选系统为研究背景,针对工业零件的位姿测量问题进行研究,并且在研究的过程中由于也涉及到了实例分割的内容,因此提出了一种基于CenterMask的实例分割网络和基于DenseFusion的位姿测量网络,并进行了相关的实验来验证改进的实用性和准确性。首先,本文对深度学习相关的基础知识进行了介绍,其中着重介绍了卷积神经网络中的相关概念例如卷积层、池化层、损失函数和优化方法等并分析了现有研究各自的优缺点。接着本文介绍了在研究过程中提出的一种深度信息处理方法,该方法能够保留场景三维信息并且能够使用2D卷积操作来提取数据特征;以及一种由注意力机制所启发的用于特征融合的算法,该算法能够高效地融合RGB特征和深度特征,在融合特征的同时通过注意力机制抑制表现能力较低的特征,明确网络模型需要关注的特征通道,增强了特征的表现能力,提升了分割网络的表现效果。最后本文在现有研究成果CenterMask实例分割网络和DenseFusion位姿测量网络的基础上进行改进,逐模块地介绍了项目中所使用到的网络的构成,并通过实验证明了改进后网络模型能够在工业零件上的实用性和准确性,选定合适的阈值的情况下,改进后的CenterMask网络能够在单帧图像中分割出更多的零件,分割速度大约10帧/秒;改进后的DenseFusion测量出来的位姿,其ADD-S值几乎能够确保在1.8毫米之下。将改进后的网络模型应用到拣选系统中,通过多次实验,在30分钟内,机械臂平均能够进行122次抓取操作,抓取成功率约为97%。但是目前的研究成果仍然有深入研究的空间。
其他文献
随着机器人行业的发展,人机交互问题也成为了热门研究问题。当机器人末端受到外力的作用时,机器人如何顺应这一外力并且不伤害到人以及不损坏自身成为了研究的重要问题。本文研究内容来源于实验室的科研课题合同,旨在利用灵巧手指尖末端传感器信号的多模态进行柔顺控制,从而完成更多复杂、智能的任务。本文首先对灵巧手指尖传感器和柔顺控制技术的研究现状进行综述,针对目前存在的研究问题确定本文传感器的选择以及柔顺控制技术
工件台是光刻机的核心子系统之一,在对硅片进行对准、调平调焦和扫描曝光等的操作中发挥着十分关键的作用。六自由度的微动台是工件台的核心部件,其跟踪定位精度直接影响光刻机的分辨率。微动台的六个自由度可以分为水平方向和垂直方向两组。水平方向包含X、Y、Rz三个自由度,主要完成硅片的对准和步进扫描,垂直方向包含Rx、Ry、Z三个自由度,主要完成调平调焦。本文主要研究对垂向三自由度的控制,研究内容如下:(1)
我国老年人口的增速在不断加快,而且老年人由于体质弱,在日常生活中常常需要家人等的看护,因此需要全社会的共同努力。随着安防、通信等技术的发展,视频监控成为保障老年人生活的重要手段之一,摄像头可以代替人工来进行查看。但是传统监控摄像头需要投入大量的人力来识别小概率的意外事件,因此本文尝试对于视频监控中的老年人异常行为进行自动化的识别,提高监控视频的利用率,为老人的生命安全提供更全面的保障。根据识别的任
利用霍尔位置传感器实现永磁同步电机的正弦驱动,在实现电机高性能运转的同时减小了系统体积,对提高系统的功率密度具有重要的研究和应用价值。然而,霍尔位置传感器会因加工和安装误差等原因导致输出信号不对称,进而带来转速和角度估算误差增大的问题,影响系统的性能,本文对此进行重点研究,并提出霍尔位置传感器存在偏差情况下的优化控制方案。插值法具有原理简单,估算转子位置不需要电机参数的优点。然而在霍尔信号存在偏差
随着未来空间探测技术的发展,灵动性、机动性成为在轨操作技术未来发展的重要方向,基于机械臂的在轨操作局限性也被逐渐体现出来,需要一种能够搭载操作执行器的太空机器人,来实现太空中更多灵巧性的在轨操作,但是太空机器人在降落至航天器上时会受到很大的碰撞力,影响降落的稳定性。本文提出了一种基于仿猫构型的缓冲机构式太空机器人,通过对猫进行跳跃缓冲机理的研究和仿生试验,得到仿生缓冲机构腿部三关节的主要构型,并建
随着材料科学的发展,越来越多的介电材料变得更薄、更耐用、性能更稳定,并有可能在某些领域取代传统金属。因此,高灵敏度介质厚度传感器的研究不仅对行业中元器件的设计、加工和生产流程具有重要意义,而且可以辅助材料科学的精确研究。与其他厚度检测仪器相比,微波检测手段可以在实现无损检测的前提下,轻松、低损耗地穿透介质材料,并且根据以自身的介电特性变化对应于不同厚度的差异,可以更加准确和可靠地完成检测。然而目前
随着深度神经网络的发展,其在视觉领域优秀的表现引起了国内外学者的关注,基于卷积神经网络的方法已经成为解决视觉领域相关任务的最重要工具。对于天气退化图像的识别及复原来说,一直是国内外学者的研究热门,特别是在自动驾驶领域,这有助于实现全天候自动驾驶。传统的天气识别算法仅仅考虑了晴天和阴天这种静态天气图像的识别,而对于自动驾驶领域来说,汽车行驶的环境往往关注的是动态的天气状况。对于去雾领域,很多研究都假
随着移动机器人运用范围的扩大和作业要求的提高,特殊环境作业对移动机器人提出了更高的要求,攀援机器人能够达到人工作业无法达到的高度并完成相应工作。攀援机器人需要在复杂的环境中寻找合适的落脚点,同时需要考虑自身平衡。因此,根据攀援的环境如何生成既能使机器人整体不失平衡稳定性又能找到使得抓握壁面上的支撑点的路径规划是关键问题。本文分析了攀援的主要问题包括抓取、平衡和路径规划。针对自身平衡问题,首先对攀援
随着现代社会智能化水平的提高,针对多智能体的研究成为了当下的热门,而多智能体的追踪-逃逸问题由于同时存在着智能体之间的协同合作与竞争博弈,是多智能体研究中的核心问题之一。自追逃博弈提出以来,追逃问题逐渐发展为一个庞大的问题家族,本文主要针对三维环境下的多智能体逃逸问题展开研究。本文引入了强化学习的方法弥补了传统方法在无模型情况下无法设计控制器的不足。本文提出了一种基于DQN算法的多智能体逃逸算法,
随着自动化装备向智能化和集成化方向发展,工业机器人领域广泛应用的环形运动平台需要通过传感器对环形运动单元进行实时的速度和位置反馈。然而,传统的机械运动传感器仅适合直线或旋转运动的检测,对于轨迹半径较大的环形运动存在结构复杂、集成度低和维护困难等问题。基于摩擦起电与静电感应耦合效应的摩擦纳米发电机能够感知敏感的机械运动,并且具有自供电、集成度高、体积小、结构简单、成本低等突出优势,为环形运动的检测提