面向PCB元件缺陷识别的多视图三维重建方法研究

来源 :江南大学 | 被引量 : 0次 | 上传用户:xtopg
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国全面迈进5G网络新时代,物联网等电子信息产业蓬勃发展,印刷电路板(Printed Circuit Board,PCB)作为实现元器件电气互联的接插基板,其表面贴片(Surface Mounted Technology,SMT)后电子元件的引脚起翘、元件不平等三维缺陷的检测识别尤为重要。光栅投影技术作为基于三维数据进行缺陷识别的关键环节,具备非接触、测量精度高等优点,但应用传统单目单光栅结构进行三维重建时,PCB元件高度差和投影角度会导致阴影存在,使得元件的高精度三维信息获取较为困难。因此传统的光栅投影模型无法进行全方位的三维重建,在PCB元件的测量及缺陷识别方面存在不足,所以研究多视图三维重建方法具有重要的实际意义。本课题拟研究面向PCB元件缺陷识别的多视图三维重建方法,以PCB元件为研究对象,通过多视图360度投影实现PCB元件的高精度三维重建,重点解决重建过程中的元件阴影分割、多视图相位融合以及三维缺陷识别等问题。本文研究内容主要包括以下4点:(1)总体系统方案设计。首先对本课题三维缺陷识别的技术要求进行介绍。详细分析本课题存在的阴影和重建盲区难点,设计本课题基于多光栅投影的多视图三维重建系统方案,具体介绍系统各部分组成,并搭建图像采集、光栅投影等硬件系统。同时根据系统的多视图投影特点,设计软件的总体架构和算法方案。(2)基于多尺度自注意力的元件阴影分割方法。针对单目单光栅三维重建存在的元件阴影问题,利用投影周期内阴影区域像素变化特性,提出了基于条纹投影特性的阴影分割方法。针对自适应分割性能的不足,设计融合卷积与自注意力的多尺度阴影分割网络,结合多尺度特征提取及自注意力机制实现鲁棒的阴影分割。对于分割阴影区域边缘不准的情况,引入相移条纹信息指导网络学习阴影边缘,实现阴影准确分割。(3)基于多视图相位融合的三维重建方法。针对单目单光栅三维重建存在的重建盲区问题,设计了基于多光栅投影的多视图三维重建方法。详细介绍光栅投影三维重建系统标定方法,包括相机标定、相位求解以及系统标定推导等内容,完成二维相位到三维点云的转换计算。针对标定视野内光强不同的问题,提出了动态阈值分割算法,实现标定点的鲁棒提取。针对多视图相位数据,提出基于通道滤波的联合高斯权重相位融合方法,实现了多视图相位融合。针对泛化性较差的情况,提出了基于生成对抗网络(Generate Adversise Network,GAN)的相位融合方法,提高了相位融合精度。(4)基于点云配准与分类的元件缺陷识别方法。针对本课题研究的三维缺陷,结合2D与3D方法设计缺陷识别算法。针对元件的三维缺陷定位问题,设计基于迭代最近点(Iterative Closest Point,ICP)优化的点云配准方法,通过配准元件点云与模板点云,结合距离阈值实现缺陷定位分割。针对分割出的缺陷点集,设计基于支持向量机(Support Vector Machine,SVM)分类模型的缺陷识别算法。针对识别过程中特征提取不够鲁棒的问题,改进Point Net++点云分类网络,融合多尺度特征辅助分类,提升目标缺陷的识别准确率。本文主要研究面向PCB元件缺陷识别的多视图三维重建算法,并在此基础上编写PCB元件三维缺陷识别系统软件,软件主要包括系统标定、三维重建和缺陷识别等功能模块。为验证多视图三维重建算法的有效性,本文基于自建数据集完成阴影分割精度试验、多视图三维测量精度试验以及缺陷识别准确率试验。试验结果表明:本文所搭建的多视图三维重建系统具有良好的精度与稳定性,阴影分割的平均交并比为0.87,三维测量的绝对精度为0.04mm,重复精度为0.01mm,缺陷识别跑料测试的准确率在98%以上,过检率低于1.5%,漏检率低于0.5%,满足课题要求。
其他文献
随着全球能源消耗的增加,液化天然气运输船的制造业得到了飞速发展,薄膜舱技术作为液化天然气船的核心技术,一直以来都是世界船舶制造领域的重点研究内容。液化天然气船薄膜舱建造的难点之一在于,薄膜舱主屏壁层不锈钢波纹板结构尺寸不规则,厚度小而热膨胀系数较大,且焊接工况十分特殊。国内多采用手工钨极氩弧焊进行焊接制造,不仅过程复杂、效率低下、危险系数高,也难以保证质量。因此,研究适用于薄膜舱不锈钢波纹薄板自动
学位
316L不锈钢具有优越的耐腐蚀、抗氧化性能和良好的传热性能,是生产核电用蒸汽发生器、水电用水轮机等发电机组关键部件的重要材料,然而,由于复杂的服役环境以及316L不锈钢硬度小、耐磨性差的缺点,导致了应力腐蚀、气蚀失效现象愈加频繁,大大降低了发电机组的使用寿命。磨料水射流表面强化作为一种基于形变强化机制的新型表面处理技术,具有应力集中现象少、强化区域全覆盖、成本低等多个鲜明特点,有望提升316L不锈
学位
少自由度并联机构具有结构简单、刚性好、速度快、精度高、承载能力大、加工制造成本低等优点,近年来一直是国内外学者研究的热点。两转动一移动并联机构是少自由度并联机构中极为重要的一类,目前以两转一移并联机构为主机构开发的并/混联机器人装备已经在混联加工中心、运动模拟器、微创手术等领域取得巨大成功。然而,目前针对两转一移并联机构约束特性的研究并不完善,具有应用价值的构型依然较为缺乏。因此,本文基于螺旋理论
学位
铅青铜作为耐磨铜合金的代表之一而被广泛应用,采用表面工程技术将铅青铜覆盖在诸如碳钢、不锈钢等材料上,可以有效提高其力学、耐磨性能,但传统方法多以热喷涂、等离子喷涂等方式制备铅青铜熔覆层,存在效率低、涂层结合强度低等问题。近年来,利用激光熔覆技术制备铅青铜熔覆层取得了一丝进展,但工作量仍远远不够,因此本文尝试在Q235碳钢上激光熔覆铅青铜粉末,研究熔覆的工艺并检验所制熔覆层的性能,以期望实现利用激光
学位
近期PT101井灯影组二段测试获得231×104m3/d的高产工业气流,刷新了四川盆地灯影组探井测试产量纪录,显示川中古隆起北部构造斜坡区灯二段具备规模资源。利用最新的钻井岩电、地震及分析测试等资料,针对川中—川北地区灯二段含油气地质条件进行新一轮研究,明确了川中—川北地区灯二段台地边缘带勘探潜力。研究表明:(1)川中—川北地区灯二段发育由南向北逐渐变宽、增厚的台地边缘沉积,台缘带宽40~130
期刊
柔性微定位平台是一种利用材料弹性形变实现稳定输出、精密定位的机构,是完成精密加工、装配、姿态调整及微观操作的主要载体。随着对精密领域研究的不断发展,宏微结合的定位方式因其兼具刚性机构行程大、柔性机构精度高的特点,逐渐替代传统的微操作系统。为满足宏微结合刚、柔机构之间配合需求,对末端微定位平台提出了大行程(不小于刚性机构运动灵敏度)、高定位精度的要求。基于分布柔度式的大行程柔性微定位平台运动过程中产
学位
铝基金刚石具有高导热系数、低膨胀系数、低密度等优点,可以很好地满足电子封装的散热需求,有望解决芯片散热难题。但目前关于铝基金刚石的研究尚不能满足铝基金刚石大规模工业化生产的需求。此外,由于金刚石硬度极高,铝基金刚石的切削加工存在困难,在一定程度上影响了该材料的广泛应用。因此,研究铝基金刚石的制备工艺、热性能和切削性能显得至关重要。本文以铝基金刚石为研究对象,选择挤压铸造法作为制备方法,研究铝基金刚
学位
目前常规的多轴平台功能单一,不具备图像检测能力,扩展性较差,无法满足目前小批量多种类的定制化生产需求,为此开发一种基于机器视觉与Codesys的多轴柔性平台。平台为模块化设计,集成螺丝锁附、点涂胶、移栽、耐久性测试等工艺,可根据不同应用场景灵活选用。以AM400为主控制器,对EtherCAT总线伺服进行高精度多轴联动控制,Codesys可采用G代码实现圆弧插补、螺旋插补及电子凸轮等多轴联动。平台搭
期刊
滚动轴承被誉为“工业关节”,是旋转机械设备最重要的组成部件。变转速工况下滚动轴承在运行过程中出现故障将产生明显的非平稳响应,同时考虑到传递路径引起的调制效应和各调制源的耦合作用,进一步增加了信号的复杂性。因此,近年来针对变转速工况下如何从滚动轴承振动信号中提取有效的故障特征信息已成为研究热点之一。本文以变工况旋转机械设备中的滚动轴承为研究对象,针对变转速情况下受转速和高脉冲噪声的影响故障激起的共振
学位
近年来为了符合各类人群的需要,形形色色的新食物层出不穷,但由此衍生的食品安全问题更是值得关注。食品质地作为衡量其品质的重要指标,能够有效地帮助企业进行产品的研发,推动运输、存储、销售等各个环节的完善,进而在一定程度上促进人体的口腔健康。因此,基于咀嚼作用中食品的变形过程,探索高效准确的食品质地检测与口感评价方法,具有重要的理论意义和应用价值。本文面向粘弹性食品材料,就口腔加工中食品变形机理与口感评
学位