基于单目视觉工业机器人的工件检测算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:yclmq
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当前工业机器人主要采用“示教——再现”的工作模式,无法感知外界条件的改变,鲁棒性差。为此,本课题设计了一套单目视觉工件检测机器人系统,通过基于深度学习的目标检测算法实现工件的准确检测,包括工件分类、工件定位以及姿态估计。研究了单目视觉工件检测机器人系统的标定方法以及工件数据集的标注方法。为了实现机器人基坐标系、工具末端坐标系和相机坐标系三者之间的转化,首先采用HALCON对相机进行内外参数标定,建立了二维像素坐标系到相机坐标系的变换关系;其次,采用“五点标定法”对工具坐标系和机器人基坐标系之间的齐次变换矩阵进行求解;最后,采用HALCON对“Eye-in-Hand”系统进行手眼标定,获得相机坐标系相对于工具坐标系的变换模型,从而实现图像二维像素坐标向机器人三维坐标的映射。为了使模型学习正确的特征,采用基于HALCON的图像处理算法对工件图像进行一系列预处理,再对其进行标注,生成高质量的工件数据集。为了提高工件的定位精度,研究了两种基于目标检测的工件定位算法。前者基于特征融合,在SSD(Single Shot Multi Box Detector)算法的基础上引入Bi FPN(weighted bidirectional feature pyramid network)特征融合,构建了自顶向下、自底向上、横向连接和跳跃连接的架构,使各个特征层的信息充分融合。给每个特征层引入一个可学习权重以表征其重要性,充分且有所偏重地利用各个不同尺度特征层的语义信息和细节信息;后者基于回归损失函数优化,以EIo U(Efficient Intersection over Union)为SSD算法的损失函数,将四个边界信息作为一个整体,并添加了中心点损失和边长损失两个惩罚项分别表征预测框与真实框的中心点相对距离和边长差异,解决了边框回归不准确的问题。针对工件定位缺乏姿态信息的问题,研究了一种基于目标检测的工件位姿估计算法。在Textesbox++算法的基础上,嵌入了一个角度转化模块。该算法采用Text Boxes++对工件的四个角点进行预测,并基于四个角点的最小外接矩形来获得工件的位置信息和姿态信息,适用于形状不同、姿态各异、位置未知的工件检测,具有较高的检测精度进和较快的检测速度。设计并搭建了一套单目视觉工件检测机器人实验平台。硬件部分主要包括机器人、视觉传感器、操作平台和工控机等,软件部分主要有图像采集模块、机器人运动模块、伺服电机模块以及人机交互界面。在工件中心点轨迹预测实验中测试了两种工件定位算法的性能并与其他算法进行比较,证明了两种算法在工件定位方面的优越性。并在该平台上针对位置不同、姿态各异的工件进行了位姿估计实验。实验结果表明,所提工件检测算法均能将检测精度稳定控制在较低值,具有良好的工业应用前景。
其他文献
<正>2021年1年26日,国务院国有企业改革领导小组办公室(以下简称领导小组办公室)印发《"双百企业"和"科改示范企业"超额利润分享机制操作指引》(以下简称《操作指引》),为"双百企业"和"科改示范企业"(以下简称企业)率先推进超额利润分享机制提供了更加权威、系统、有针对性的政策指导。超额利润分享机制是国企改革三年行动方案中五种("3+2")重要中长激励方式之一,对健全国有企业市场化经营机制、提
期刊
电机控制器作为电动汽车的核心部件,决定着电机的运行效率与运行安全,以及调速系统性能的优劣。在电机控制器研发初期需对控制器的各项性能进行测试,但现有测试系统存在结构复杂、硬件成本高、周期长等缺点。为了解决以上问题就有了利用电力电子技术对电机及其机械负载进行模拟的电机模拟器系统,而电机模拟器能否模拟出电机的真实特性,其关键之一就是建立准确高效的电机模型。目前,车用永磁同步电机模型多采用定参数的线性模型
学位
近年来,全国各地的机动车和乘用车保有量都在快速增加,对道路交通安全和出行效率带来了艰难的挑战。车辆换道行驶是发生频率最高的日常驾驶行为之一,一般因为驾驶员对行驶环境的判断和操作不当,导致发生交通拥堵或者严重的道路安全事故。自动驾驶技术的目标之一就是减少因人为因素产生的交通事故,目前重点在研究环境感知、驾驶决策、轨迹规划跟踪等方面,以尽早实现自动驾驶。本文探究在换道行驶过程中的轨迹规划和跟踪问题,降
学位
在商用车主减速器设计开发完成后,需要对主减速器进行疲劳耐久试验,以验证主减速器的设计寿命。在进行疲劳耐久试验的时候,由于不能随意拆开主减速器,观察内部损伤情况,需要通过采集到的信息实时对主减速器故障进行诊断。随着主减速疲劳耐久试验的不断发展,企业需要在某一特定故障(点蚀、断齿等)就停机。目前的人工故障诊断效率低,对人员专业技能要求高,专家系统的故障诊断准确率也无法达到企业的需求。因此,找到一种高精
学位
储能行业高质量发展不仅是解决新型电力系统供需匹配和波动性问题的关键,也是保障基础能源储备和能源安全的重要抓手。本文介绍了我国储能行业的发展现状,总结了金融支持储能行业发展的探索实践及面临挑战,最后从推动储能市场化发展、推动财政金融协同支持、创新储能企业融资渠道和模式三方面提出优化策略。
期刊
摆线转子泵是一种容积式泵,由于其结构紧凑、运行平稳、成本低等优点而广泛应用于汽车的冷却和润滑系统中。近年来,随着汽车行业的发展,摆线转子泵的应用场景更加广泛,同时也对其性能和寿命提出了更高的要求。因此,本文在传统的单圆弧摆线转子泵的基础上,对其内外转子齿廓型线进行改型,得到了一种多圆弧复合摆线转子泵,并以其为研究对象,开展了对其性能的试验和建模研究。本文的主要工作有:(1)论述了单圆弧摆线转子泵和
学位
为推动国内经济高质量发展和生态文明建设,我国提出了碳达峰、碳中和目标。对于汽车行业而言,面临的是日益严苛的排放法规。行业共识认为降低汽车的气动阻力是一种可有效减少燃油消耗,提升燃油经济性的措施。汽车外造型的风阻性能优化一般可以分为三个阶段,分别是CAS面、A面、整车。其中CAS面是造型开发的初始阶段,对造型的风格起着决定性作用。工程实践中,对CAS面模型的优化,通常采用传统的迭代优化,不仅耗时耗力
学位
<正>2022年11月26—27日,由上海戏剧学院、中国电影资料馆(中国电影艺术研究中心)《当代电影》杂志社、上海影视戏剧理论研究会联合主办,上海电影家协会、中国高等教育学会影视传媒委员会、上海电影评论学会协办的“有界与无界:技术革命、影像语言与共同想象”大型学术研讨在上海戏剧学院举行。
期刊
本文综述了激光加工中偏振效应的基本原理及相关的实验结果,展望了偏振效应的可能应用前景.
期刊
微型电动汽车被广泛应用于农村、乡镇、小城市等地区作为日常使用、货物配送、安保巡逻等用车。但其本身的续航里程极为有限,若增加电池容量则会增大微型电动汽车重量和体积,不符合微型电动汽车的设计使用用途。加装增程器能有效解决微型电动汽车续航里程问题,但增程器启动运行时,会破坏电动汽车良好的NVH性能。因此,本文以微型增程式电动汽车为研究对象,针对其增程器启动与运行时突出的噪声问题,提出利用隔声罩将增程器罩
学位