基于深度学习的堆叠工件识别与定位系统的设计与实现

来源 :中国科学院大学(中国科学院沈阳计算技术研究所 | 被引量 : 0次 | 上传用户:squarestone
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在工业生产中,铸造等工序生产出的工件一般堆放在料斗里或托盘上,再通过分拣排序进行后续的精加工。常规的人工分拣手段具有工作环境差、劳动强度高、重复劳动易出现疲劳导致分拣失误等缺点,而在自动化生产线中,专门设计的分拣设备常存在噪音大、故障率高、适应性差等缺点。为了提高工件的分拣效率、提高分拣质量、减轻工人劳动强度和改善工作环境,同时满足小批量、多品种以及混料生产的需求,本文面向机器人分拣领域,研究和开发了一套基于深度学习的堆叠工件识别与定位系统,主要工作如下:(1)研究了目标检测领域中常用的Faster R-CNN模型的原理,并进行了堆叠工件检测实验。将堆叠的工件分为轻度、中度和重度等场景。实验结果表明Faster R-CNN模型在中度和重度场景中都存在较大的错检和误检率,检测效果较差。(2)对 Faster R-CNN 进行改进。将 ResNet 和 SENet 合并为 SE-ResNet 构建特征提取网络,改善了堆叠状态下工件特征信息提取不充分的问题;在Soft-NMS算法基础上提出Bin-Soft-NMS算法,通过动态阈值改善了阈值不准确导致的模型召回率低和相邻堆叠工件边界框得分低而被抑制的问题;采用Repulsion Loss构建损失函数,改善了工件预测框被其他堆叠工件真实框和预测框影响的问题。实验结果显示改进后的模型在堆叠工件场景下平均检测精度为86.6%,轻度、中度、重度场景下分别提升了1.4%、3.5%和5.125%,平均提升3.34%。(3)设计和实现了堆叠工件识别与定位系统的架构并完成了 KinectV2相机的标定工作。进行了系统硬件设备选型,详细设计了软件架构和主要功能模块。系统采用改进的Faster R-CNN深度学习网络模型以提高工件检测精度;采用JETSON NANO开发板以降低成本;采用KinectV2摄像机以解决传统平面目标检测缺乏的深度图像数据的问题。制定和实现了基于ZrARM机器人堆叠工件无序分拣过程的总体流程。研究了 KinectV2摄像机标定的原理,选用张正友标定法对KinectV2摄像机的彩色相机和深度相机进行标定,求出了各相机的内外参数矩阵和畸变参数。(4)进行了系统集成和混合实物抓取实验。完成了基于ZrARM机器人的堆叠工件无序分拣实验,实验结果显示系统拾取成功率达到87%,基本能够满足一定条件下的工业生产的需求。
其他文献
<正> 前言最近党中央领导同志在视察大西北时,发出在青海和大西北种草种树、发展畜牧业、改造山川、治穷致富的指示,其精神实质就是要发挥大西北广大草原牧区的自然优势,不断提高草原畜牧业的经济效益。这个指示精神无疑适用于包括大西北在内的全国所有的草原牧区。这对于从事草原畜牧科学研究的广大科技工作者是巨大的鞭策和鼓午。它说明发展我国草原畜牧业,建立一个良性循环的草原生态系统已经提到我国社会
期刊
<正>商业银行在坚持贯彻新发展理念、服务经济社会可持续发展的同时,应积极顺应国际趋势,对标国际ESG理念框架,构建ESG治理架构,明确中长期发展目标,强化ESG管理的内部协同。近年来,关注企业在环境、社会和治理方面非财务表现的ESG理念日益受到各方关注,从前沿投资策略逐步成为市场主流,强化顶层设计是当前ESG发展的显著趋势。ESG理念的深层内涵与建设银行新的战略方向和经营理念不谋而合。近年来,建设
期刊
自2022年1月开始,生猪价格再度开启震荡下行模式,而从2月7日各企业陆续开工后,生猪市场更是屡创新低,东北、西北地区生猪价格全线破6元(每500 g)。此阶段的低迷价位与2021年9月底10月初的价格走势较为接近,但不同的是此时为虎年春节后的消费淡季。短期来看,从2021年第四季度至今,整体“倦怠状态”仍未出现明显改观,还有下行空间。预期上半年的猪价在10-16元/kg之间,八九月份可能出现一个
转折关联词是现代汉语中最具代表性,也是生活交际中使用范围广、频率高的一类关联词,在口语和书面语中都占有重要的地位。对于汉语学习者来说,熟练掌握和使用转折类关联词并不容易,日常交际应用中,也常会出现转折类关联词的使用偏误。因此,转折类关联词既是对外汉语教学的重点,也是一大难点。为了帮助留学生能够更好地学习汉语,减少转折类关联词的偏误,笔者以人工转录的电视节目《非正式会谈》第一季11位外国留学生的口语
机械设备是支撑冶金工程顺利开展的必要条件,对冶金工程经济效益提高有着极大的影响,保证机械设备正常稳定运行非常重要。鉴于机械设备运行环境复杂性,极易受到外界因素干扰,导致设备故障问题发生,为有效规避此方面情况出现,应重视与加强机械设备安全管理。基于此,本文对冶金工程机械设备安全管理必要性进行分析,提出合理选择机械设备、提升机械设备安装管控重视程度等举措,实现进一步提高冶金机械设备安全管理水平。
<正>2021年年初,35岁的阿远还信誓旦旦地宣称:“打工,我是不可能打工的。”返乡创业十多年,阿远自认为已经习惯了这种自己做主,自由自在的生活状态,给别人打工,就要受他人约束,他是万分不愿意的。没曾想迅速被自己“打脸”。他不仅在几个月后就去杭州打工了,还为了赚加班费,没有回家过年。因为,2021年上半年,
期刊
<正>普通啊,不平凡,它是我唯一的家乡。——题记起风了,记忆随时间一直晃到现在。这是我生活的小镇,亦是我快乐的乌托邦。鄌郚是我爱的家乡。仲春时节,九曲河溪沿路南流,迷蒙细雨雾遮杏树,嫩绿小草沾满雨露。初夏,路边高大茂盛的梧桐,繁茂的枝叶交错遮掩,把蝉鸣和光影割成碎片,投下一片斑驳的树荫,小镇的夏天,藏有太多美好。
期刊
<正> 羊草草甸草原广泛分布于我国东北平原和内蒙古东部草原,长期以来,由于利用不合理并缺少人为更新,已普遍出现程度不同的退化,主要表现在草群优良成分减少和产草量下降。为了尽快提高羊草草甸草原的生产力,以适应畜牧业发展需要,我们于1984~1985年在内蒙古哲里木盟珠日河牧场进行了综合改良试验研究。
期刊
随着人们对煤炭需求量的逐渐增加,煤炭开采质量与效率备受关注。加强对定向钻探技术应用的研究,可以解决煤矿生产中存在的一些问题,为开采质量和效率带来一定积极影响。
<正>水亭门古街,空旷而静谧。地面,被岁月磨砺得光滑而平整;房子,被岁月刻画得古老而柔美。闭上眼,我的思绪能穿越到古代,穿着汉服,行走在古道中,环佩叮咚。月光铺排在深灰的砖瓦上,洒落在年老的街道中,慵懒又散漫。古朴的屋檐,有月光缓缓从檐角滴落……各色的精美花纹灵动起来,
期刊