基于深度学习的金属表面瑕疵识别

来源 :桂林电子科技大学 | 被引量 : 0次 | 上传用户:jh_fan88
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
金属表面瑕疵的自动化检测是工业质量控制领域的研究热点,工业制造商对金属表面质量的高标准对计算机视觉检测系统及其算法的性能提出了更高的要求。由于金属表面瑕疵类别的复杂性和多样性,以及纹理区域、噪声灰尘等干扰的存在,检测划痕、裂纹和凹痕等缺陷对传统的计算机视觉方法来说是一项挑战。传统图像处理需要排除外界干扰对瑕疵进行统计分析,以定性或定量的方式表示特定瑕疵,在应用以及性能上具有一定的局限性。而深度学习可于数据集中自主学习更加抽象的高层表示,可鲁棒地胜任金属表面瑕疵识别任务。但往往,深度学习模型的精度伴随着高昂的计算成本以及存储成本,这些特性同时也限制了深度学习于资源受限的嵌入式终端的应用。因此本文研究一种轻量型的神经网络用于金属表面瑕疵检测任务,主要研究工作包括:1.本文针对研究对象中的黄斑、划痕、开裂和杂质4种瑕疵,提出了一种基于传统图像处理方法的金属表面瑕疵检测系统。首先,将采集图片中的金属产品分割成纹理区域、光滑区域和外圆区域三个部分。其次,为降弱光照不均的影响,再将光滑区域和外圆区域通过八个扇形掩膜分割为八个区域。在不同区域分别以不同的平滑度、灰度均值作为判别阈值,其中平滑度主要用于筛选出划痕瑕疵,灰度均值主要用于筛选出黄斑瑕疵。最后,通过动态阈值分割提取形态特征用于判别是否存在开裂以及杂质。通过上述三个特征的层层筛选,判别待测图像对应的产品是否是合格品,最终准确率达到91.1%。2.相较于传统卷积神经网络,本文采用迁移学习构建一种基于MobileNetV2的金属表面瑕疵分类系统。构建该系统的数据集是于工厂实际采集的金属产品图片,同时为扩充数据量,添加东北大学金属表面缺陷数据库,最终数据集共计九种类别的瑕疵以及一种正常产品。通过计算网络的识别率、模型参数量和模型计算量,将MobileNetV2与其他五种网络模型进行试验对比,相较于准确率最高的VGG19,虽然在准确率方面MobileNetV2低了0.10798%,但其参数量以及运算量较VGG19而言,分别降低了98.4023%和98.4109%。通过计算基于预训练的MobileNetV2的分类系统的准确率、精准率、召回率和F1指标,证明所提系统在性能上的良好性以及稳定性。最后,基于MobileNetV2的金属表面瑕疵分类系统于测试集的识别率为97.96%。3.在上述轻量型卷积神经网络的基础上,介绍模型压缩的常用方法,包括剪枝、量化和低秩分解等。为实现更低的模型参数量以及模型计算量,本文采用三种不同的剪枝方法L1-norm、Slimming及Auto Slimming对第三章所提的基于MobileNetV2的金属表面瑕疵分类系统进行剪枝,实验结果证明,该模型在Slimming剪枝方法上的性能最佳,剪枝后的系统在金属表面瑕疵识别任务中的准确率为95.89%,模型大小由313.5M缩小为127.5M,模型参数量由2.24M缩小为0.98M。同时针对四种不同的网络模型MobileNetV2、VGG、Res Net50、Shuffle Net V2在Slimming剪枝方式下的金属表面瑕疵分类系统,分别从剪枝前后的识别率、模型参数量变化以及模型计算量变化进行对比,实验结果表明基于预训练的MobileNetV2的分类系统在Slimming剪枝方法的作用下,在金属表面瑕疵识别任务中精度达到最高,同时模型的计算量和参数复杂度也降到最低,有利于在嵌入式和移动终端设备上实现基于深度学习的金属表面瑕疵识别任务,为人工智能在工业生产环节的应用提供一定的实践参考。
其他文献
细粒度图像识别是计算机视觉领域备受关注的一个分支,在学术界和工业界都有着极其重要的价值。最近几年,深度学习被广泛研究,开始频繁应用在越来越多的领域,并取得了新的重大突破。普通的粗粒度图像识别领域与深度学习结合后也得到了很大的发展,达到了前所未有的识别精度。但由于细粒度图像识别的目标物种不同的子类之间差别极其细微,而同一子类的物种可能受到光照、遮挡、姿态以及复杂背景等多方面的影响导致在图像中呈现的外
多传感器目标跟踪是通过多个传感器相互合作,对目标的状态和数目进行有效地跟踪估计。信息融合是多传感器网络中的关键算法,该算法通过对分布在空间中不同方位的传感器所获取的数据信息进行通信融合,提取出更加精确的数据信息。多传感器相互之间的协同工作提高了整个网络系统的量测精度、增加了系统的感知维度、加快了信息处理速度以及增强了环境适应能力等。近年来,基于随机有限集理论的目标跟踪方法取得了突飞猛进的成果,也应
在现代电子电路制造领域中,电子元件缺陷造成的电路故障可能导致电子产品的安全问题。电路中的大部分故障都发生在模拟电路部分,所以各国学者针对模拟电路故障检测技术进行了大量的研究。在模拟电路故障检测领域中,深度学习技术是新兴的研究方向之一,但由于模拟电路中元件参数容差性与非线性的问题,导致深度学习模型的特征值提取非常困难,且需要选择合适的诊断模型进行故障检测。本文以单故障检测为目的,设计了一种深度学习特
随着民用无人机的普及,“低慢小”无人机黑飞事件对公众安全造成隐患,反无人机技术快速发展。为了解决空域监管的难题,设计了一套基于调制频谱特征识别的无人机探测系统。由于基于频谱特征的隐藏目标探测是一种无源的探测方式,因此本系统适合作为全天候、全天时自主无人的“低慢小”无人机探测系统,具有迫切的军民应用需求。本文以基于调制频谱特征识别的无人机探测系统的设计与实现为主要内容,从分析雷达探测、光电探测和无线
随着现代科学技术的高速发展,导航技术因其高精度、高动态和高可靠性等优点已成为备受人们关注的热门领域。其中,全球卫星导航系统(Global Navigation Satellite System,GNSS)历经50余年的发展也越来越成熟。但是,单一的GNSS存在适用环境局限性和抗干扰能力差等问题。GNSS与捷联惯性导航系统(Strapdown Inertial Navigation System,S
姿态估计是无人机(UAV)稳定可控飞行的前提,因而姿态和航向参考系统(AHRS)被广泛地应用在四旋翼无人机飞行控制中。目前,四旋翼无人机的姿态估计普遍采用磁力计、加速度计和陀螺仪(MARG)的传感器组合,但是MARG传感器容易受到各种干扰,如振动、外部磁干扰、陀螺漂移等,这些因素导致单个传感器进行姿态测量时存在较大的误差。另外,由于低成本MARG传感器其自身固有噪声较大,这会导致姿态误差与噪声之间
阵列三维合成孔径雷达(Synthetic Aperture Radar,SAR)可以实现对场景更丰富信息的观测,成为国内外雷达领域研究的热点之一。传统阵列三维SAR各阵元发射宽带信号,带来宽带信号非线性和接收端宽带信号无法有效分离的问题。频率分集阵列(Frequency Diverse Array,FDA)三维SAR各阵元发送具有频率差的单频信号,摆脱了传统阵列三维SAR发射宽带信号的限制,具有很
在现代社会,对更高数据速率通信系统的需求不断增加。在多输入多输出(Multiple Input Multiple Output,MIMO)领域,索引调制(Index Modulation,IM)技术作为一种创新性的传递信息的方式,由于在频谱、能量效率及硬件简单性方面的独特优势,IM近年来成为新的研究热点,是未来无线网络很有竞争力的候选技术之一。空间调制(Spatial Modulation)作为I
非合作通信是在通信参数未知的前提下,利用信号处理技术对接收的电磁波信号进行参数估计和解调,在军事和民用领域都有着广泛的用途。本文针对MIMO-OFDM的非合作接收问题,研究了发射天线数目、空时编码模式以及子载波数估计方法,主要研究成果如下:(1)针对MIMO系统发射天线数目估计难的问题,提出一种基于CNN的发射天线数目识别方法。该方法采用单天线接收MIMO信号,将采集的不同天线I&Q数据经过功率归
高阻隔硫化橡胶由于其固有的优异性能,被认为是一种至关重要的化学防护材料,但仅仅是避免危险化学品和人体直接接触并非解决穿戴者人身健康问题的最优解。因此,对于进一步增强其溶剂阻隔性能和溶剂敏感特性仍是值得讨论的议题。本工作利用环保、无毒的多巴胺(DA)还原氧化石墨烯(GO),即聚多巴胺改性氧化石墨烯(PDA-r GO)作为补强填料,分别以氟橡胶(FKM)和溴化丁基橡胶(BIIR)为基体,通过溶液共混法