基于深度学习和线激光双目视觉的空间焊缝检测与跟踪

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:sonim0
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
焊接机器人凭借其焊接质量稳定、生产效率高、适应能力强等优点逐渐取代人工焊接而得到广泛运用。然而,对于形状复杂、加工误差大、装夹精度低及焊接热变形较大的工件,传统示教再现型焊接机器人不能高效、高质量地完成焊接。为提高焊接机器人的自适应能力,本文开展基于深度学习和线激光双目立体视觉的焊缝检测、三维定位以及焊接轨迹与姿态在线跟踪技术研究。主要研究内容如下:(1)搭建基于双目视觉的焊接机器人硬件平台并设计系统软件架构。阐明相机成像原理、双目立体视觉原理以及手眼标定原理,基于Open CV开展标定实验,完成双目相机内、外参数标定和手眼矩阵标定,通过重投影实验和双目测距实验验证相机标定精度,并由工具标定将工具坐标系建立于焊枪末端,最后基于标定所得参数建立视觉传感器及机器人系统关键坐标系间变换关系。(2)研究基于双目视觉的焊缝起点检测与定位方法。首先,基于Center Net框架设计焊缝起始向量检测算法,在此基础上提出焊缝起点处工件与焊枪位姿求解方法。在检测出焊缝起始向量和底板边线后,基于双目立体视觉原理实现三维焊缝起始向量和底板边线向量求解,进而求解焊缝起点处工件和焊枪位姿。实验表明,焊缝起始向量检测算法在检测精度和鲁棒性上有明显提升,焊缝起点检测与定位方法能够适应工件形状、姿态的变化,位置和姿态检测精度满足跟踪起点对准需求。(3)研究强噪声背景下的焊缝特征点检测方法。该方法在焊接开始前由传统方法确定焊缝特征点跟踪区域,在后续帧中由目标跟踪算法定位焊缝特征点。为解决噪音干扰和长期跟踪引起的跟踪漂移误差,利用激光条纹分割网络从跟踪确定的感兴趣区域中分割激光条纹,并由传统方法精确检测焊缝特征点和激光条纹骨架。实验表明,激光条纹分割网络能从焊接噪音中完整地分割激光条纹,焊缝特征点检测方法即使在强噪音环境中依然保持较高精度和鲁棒性。(4)研究基于感兴趣区域单像素骨架的匹配点搜索算法、焊接过程中稠密点云创建方法和基于点云的焊接路径与姿态求解方法。通过整合各个算法模块构建实时焊缝检测与跟踪系统,设计系统运行流程以及用户界面。焊接实验表明,在不同工况下,跟踪系统依然保持较高的轨迹跟踪精度和姿态跟踪精度,满足焊缝跟踪实时性和精度要求。
其他文献
随着我国电力行业的快速发展,电网不但对整个国家的覆盖越来越密集,而且也朝着越来越自动化与智能化的方向发展。在线监测技术已成为我国推进发展坚强型智能电网的重要构成部分。但由于工作环境的复杂性,当前对于在线监测设备的供电问题成为了该技术发展的重要制约因素之一。而利用能量收集技术将自然界与输电线路周边能量转换为可用的电能,逐渐成为了问题的解决方案。随着微电子技术的发展,超低功耗器件以及无线通信模块为发展
学位
<正> “带宽最小化”是从计算机科学中提出来的一个组合最优化问题.它对于使用计算机进行数值计算时,如何压缩存储、减少计算量、增强计算稳定性有着重要意义.本文讨论模型的建立和一般情况的“带宽最小化”的算法.1.稀疏矩阵的存储在许多工程技术领域(如航空、造船、建筑及其它结构工程)的数值计算问题中,例如用有限元素法进行结构分析,或者对电力网、热力网进行系统分析,都要解一个大型的线性方程组或线性方程组集
期刊
近年来,油气润滑凭借其耗油量低、润滑效率高、环境污染小等诸多优点逐步应用在高速电主轴轴承上,但是现阶段对于润滑系统运行状态的监测缺乏研究,油气润滑系统故障导致的润滑油断流现象将加剧轴承磨损和缩短轴承使用寿命。为了实现对润滑系统工作状态的实时监测,本文从搭建油气润滑系统出发,在近红外光学检测的基础上设计硬件电路,将其安装在管线末端,分析润滑系统处于不同状态时的透射光信号,在此基础上编写监测程序并完成
学位
带筋薄壁镂空注塑件是PP塑料产品中的一种特殊结构,用于透气的镂空结构,可增加产品美观度,减轻产品重量,加强筋设计增加了强度和刚度,符合“轻质高强”的设计理念,常见于座椅类注塑件和电子仪器外壳。由于PP材料的收缩特性和带筋薄壁镂空注塑件的结构特征,产品外观易出现缩痕缺陷,严重影响产品外观质量。本文旨在研究带筋薄壁镂空注塑件缩痕缺陷形成机理,分析注塑工艺参数、模具结构、产品结构对带筋薄壁镂空注塑件缩痕
学位
环氧树脂具有高度的黏着性、良好的电气绝缘性,而且有着较好的加工性,在成型时收缩率小,因此,环氧树脂已应用于发电机、电子器件以及各种千伏的变压器等重要绝缘元件的浇注。但在长时间工作过程中,绝缘材料普遍存在着绝缘老化现象,这影响了电力系统可靠运行。环境中产生的湿热因素会影响环氧树脂材质的绝缘老化能力,进而加快了环氧树脂老化速率,从而严重影响了装置上绝缘元件的安全工作,因此深入研究环氧树脂在湿热环境下的
学位
报纸
报纸
感应式无线电能传输(Inductive Power Transfer,IPT)技术是利用高频磁场作为能量传输媒介,并综合利用了电力电子技术、谐振拓扑和控制技术等,以实现电能非接触式传输。相较于传统的输电方式,该技术具有环境适应能力强、灵活性高、便捷、安全、美观等优点,在电动汽车和智能家居等领域具有广阔的应用前景。然而,在IPT系统的实际应用中,需要发射机构与接收机构精准对位。若发射机构与接收机构之
学位
随着能源革命的进行,推进用能转型、发展能源互联网成为解决当前世界能源危机与环境恶化问题的重要解决途径。作为能源互联网的典型终端应用形式,园区型综合能源系统以电力系统为核心,以互联网及通信技术为基础,以分布式可再生能源为主要一次能源,与天然气网络、交通网络等其他系统紧密耦合而形成的多能网流系统。在此基础上,多种能源的相互耦合与替代也为供-需双侧提供了新的交互方式,综合需求响应(Integrated
学位
近年来我国数据中心规模高速增长,与此同时带来了巨大的能源资源消耗。空调系统作为数据中心最重要的耗能设备,其能效提升对推进绿色数据中心建设至关重要。数据中心信息化管控系统的建设,为系统智能运行策略的进一步优化升级奠定了数据基础。本文以我国夏热冬暖地区某既有数据中心机楼为研究对象,提出了一种数据中心中央空调冷冻水系统节能优化方法。根据数据中心室外天气条件和机房IT设备负载等情况,优化冷冻水系统运行参数
学位