基于机器视觉的匣钵缺陷检测系统_谢礼飞.pdf

（总第 297 期）电子工业专用设备Equipment for Electronic Products ManufacturingEEPMDec 2022收稿日期：2022-12-12基于机器视觉的匣钵缺陷检测系统谢礼飞1,2，段红松1,2，何易鹏2，肖 路2(1.湖南烁科热工智能装备有限公司，湖南 长沙410111；2.中国电子科技集团公司第四十八研究所，湖南 长沙410111)摘要：针对锂电材料行业匣钵缺陷检测需求，设计了一种基于机器视觉的匣钵缺陷检测系统。该系统结合了光度立体算法以及机器学习算法，使用光度立体算法检测匣钵的腐蚀和裂纹，使用机器学习算法检测匣钵的缺口，并通过大量的模型训练来进行缺陷判别。通过实验测试，该系统具有较好的匣钵缺陷检测效果，大大提高了检测效率。关键词：机器视觉；缺陷检测；锂电材料；匣钵中图分类号：TN606文献标志码：B文章编号：1004-4507(2022)06-0058-05Sagger Defect Inspection System Based on Machine VisionXIE Lifei1,2，DUAN Hongsong1,2，HE Yipeng2，XIAO Lu2(1.Hunan Semicore Thermal Intelligent Equipment Co.，Ltd.，Changsha 410111，China；2.The 48thResearch Institute of CETC，Changsha 410111，China)Abstract:A sagger defect inspection system based on machine vision is designed to meet the require-ments of sagger defect inspection in lithium battery material industry.The system combines the photo-metric stereo algorithm and machine learning algorithm，uses the photometric stereo algorithm to in-spect the corrosion and crack of the sagger，uses the machine learning algorithm to inspect the notch ofthe sagger，and uses a large number of model training to identify defects.Through experimental test-ing，the system has good sagger defect inspection effect and greatly improves the inspection efficiency.Key words:Machine vision；Defect detection；Lithium battery material；Sagger在国家“碳达峰”、“碳中和”及“十四五”规划等政策激励下，新能源汽车发展迅猛，锂电行业远景利好，智能化装备也逐步更新换代，满足了生产需求。新能源汽车和动力电池的飞速发展促使锂电正极材料的需求量激增，人工成本越来越高，产品质量难以保证，需要大量的智能化装备满足生产需求。因此，国内的锂电材料企业不仅对设备的自动化、智能化、智慧化等要求越来越高，而且使用可靠稳定的智能装备替代人工更是大势所趋。测试测量技术与设备58（总第 297 期）电子工业专用设备Equipment for Electronic Products ManufacturingEEPMDec 20221总体架构1.1缺陷种类匣钵是锂电材料生产过程中的易损品，使用寿命约 2030 次的循环周期，每次循环的时间约20 h。每次烧结过程由于高温、气体腐蚀、碰撞挤压等影响，匣钵逐渐会产生裂纹、缺口等缺陷，有可能在烧结过程中碎裂，一旦发生破裂匣钵卡窑的情况，需要停止整条生产线的生产工作，等待窑炉冷却大约 20 h 之后才能进行维修，不仅浪费原材料，还导致生产停滞。另外，原料对匣钵的腐蚀使得匣钵内部分表面产生腐蚀（掉皮）缺陷，脱落的匣钵表皮混入锂电材料原料中，导致成品材料的能量密度下降约 4%。锂电材料生产过程中需要及时在每次循环中检测并剔除有缺陷的匣钵。匣钵的缺陷主要有 3 种：缺口、裂纹、腐蚀，如图 1 所示。1.2缺陷检测方法经调研，行业内有使用固有频率法、3D 深度视觉法、X 射线法以及密封充气法等方法来检测匣钵的裂缝、腐蚀、缺口等缺陷1。（1）固有频率法是基于匣钵的正常与缺陷状态下的固有频率存在差异所提出的，通过测量使用中匣钵的固有频率对比标准固有频率可以检测到有缺陷的匣钵，对于裂纹裂缝的检测效果显著，但是需要通过锤击的方式获取固有频率，这本身就对匣钵有一定的损伤2。（2）3D 深度视觉法是通过深度相机拍摄匣钵表面并重构匣钵表面的三维模型，通过与标准匣钵模型的对比就能够检测出有缺陷的匣钵，优点是识别准确，缺点是需要高精度的深度相机，测量时间慢3-5。（3）X 射线法是对匣钵的 X 光图像进行分析，对于裂纹裂缝等内部缺陷效果显著，但是对于表面的腐蚀等缺陷无法检测，同时在车间中使用还存在射线照射对人体的伤害。（4）密封充气法是使用特殊的密封机构套住匣钵的开口，形成封闭的腔体，再向该腔体内充气加压。如果出现裂缝，气压则会快速下降，这种方法对于穿透匣钵的裂缝检测效果明显，但是对结构的密封性要求较高，对于未穿透的裂纹和腐蚀等缺陷无法检出。各方法特点总结如表 1 所示。经过以上多种方案的对比论证，最终决定采用单目视觉系统结合光度立体算法以及机器学习算法开发了一套基于机器视觉的匣钵缺陷检测设备。基于机器视觉的匣钵缺陷检测装备的目标是稳定、快速、准确地检测有缺陷的匣钵并及时剔除，并计划逐步替代人工检测，提高锂电材料生产过程的自动化、智能化程度。1.3系统结构考虑到单目相机低成本的特点，采用单目相机作为测量传感器，配合多台光源设备使用。系统设置了匣钵内底面和四周外表面 2 个工位的缺陷检测，能够压缩系统检测节拍周期，使得检测时间满足节拍要求。在检测的工位之后还设置了相应图1匣钵缺陷的种类表1各检测方法特点检测方法机器视觉法固有频率法3D 深度视觉法X 射线法密封充气法优点鲁棒性强应对不同缺陷成功率高能有效检测出裂纹、缺口精度较高能检测多种缺陷能检测内部裂纹能贯穿匣钵的裂纹缺点前期需要较大投入建立数据集训练人工智能模型无法检测腐蚀缺陷对传感器依赖性大、高精度传感器成本高无法检测腐蚀缺陷X 射线对人体有伤害无法检测未穿透的裂纹、腐蚀缺陷长期使用气密性不佳匣钵出现大面积掉皮匣钵底部出现严重掉皮情况匣钵出现裂纹缝隙超过 1 mm匣钵出现严重变形及侧面裂纹接近底测试测量技术与设备59（总第 297 期）电子工业专用设备Equipment for Electronic Products ManufacturingEEPMDec 2022的缺陷匣钵剔除补充装置，用于维持生产线匣钵数量的统一。系统结构如图 2 所示。系统主要包含部分：（1）匣钵输送定位系统：包括输送匣钵的传输、夹持、阻挡、顶升、旋转、升降等装置，从机械结构上实现两个工位上匣钵的输送、定位、旋转、剔除补充、过渡、储存等功能；（2）电气控制系统：包括对上述匣钵输送定位系统的控制等，实现匣钵的输送控制以及停靠在正确的位置以方便视觉系统的检测，同时能够在输送/旋转停靠到位之后发送到位指令给视觉检测系统，并根据视觉检测系统的信号对异常的匣钵进行分拣；（3）视觉检测系统：包括中央处理单元、图像处理单元、单目工业相机系统、光源系统等，在接受到控制系统的到位信号之后，对匣钵进行实时在线的检测表面裂纹的位置和宽度、腐蚀面积的百分比以及缺口形态和大小的检测。检测到有缺陷不符合使用要求的匣钵之后发送信号到电气控制系统，操作匣钵输送系统中的执行机构进行对应的操作。整个过程完全由装备自主感知、决策并执行，并且在匣钵表面存在各种各样不同干扰的情况下还能够良好的运行，具有良好的自适应能力。2系统原理该检测系统结合了光度立体算法以及机器学习算法，使用光度立体算法检测匣钵的腐蚀和裂纹，使用机器学习算法检测匣钵的缺口。由视觉系统采集的多角度光照二维图像恢复出匣钵表面的轮廓纹理信息，相比于传统的 3D视觉设备该技术路线具有低成本、测量速度较快的优势。该算法原理如下。由成像原理，每张图像中像素的亮度值为：I(x，y)=L?(x，y)N?(x，y)(1)而像素值与光照向量、反射率及匣钵表面法向量均有关，则根据 4 张不同角度下拍摄的图片对某个像素坐标为(x，y)处有：I1I2I3I4IIIIIIIIIIIIIIIIIIIIIIII=L1xL1yL1zL2xL2yL2zL3xL3yL3zL4xL4yL4zIIIIIIIIIIIIIIIIIIIIIIIINxNyNzIIIIIIIIIIIIIIIIII(2)由式(2)计算得到匣钵表面单位法向量为：N?(x，y)=(LLT)-1(LTI)(LLT)-1(LTI)(3)此方向向量为某一像素点的方向，扩展至整幅图像后得到该图像的“法向量图”，即图像中各像素的方向向量。然而仅需针对前景匣钵区域的图像进行处理，因此有必要实施前景滤波提取出匣钵。本系统采用帧间差法提取匣钵图像。其具体方法为：匣钵输送至检测工位前拍摄一张图像，得到无匣钵存在时的背景，待匣钵进入工位并停下来后再拍摄一张图片，两张图片对应的场景的差别在于有无匣钵，因此对这两张图片求差得到的图像中仅在前景像素处其亮度不为 0，而在其余位置（背景）处亮度为 0 或者略大于 0。使用二值化方法将该图像分为 2 部分，其原理为，设置一个阈值，亮度低于该阈值的像素标记为 0，而亮度高于该阈值的像素标记为 255，由于帧间差算法处理过后图像的背景亮度差较小，故此阈值设为10，可以提取出前景图像，即匣钵图像。将前景图像区域作为掩膜，对得到的法向量图运行高斯滤波及边缘检测算法。由于图片拍摄时存在噪声，该噪声信号由相机的光耦合器件带来，反应在图像上则为随机分布的细小光点。在频谱中该类噪声为高频信号，将会对图像的边缘检测等后续处理造成干扰，因此需要采用滤波器将该噪声滤去。使用高斯滤波器对这些噪声信号进图2系统结构示意图测试测量技术与设备60（总第 297 期）电子工业专用设备Equipment for Electronic Products ManufacturingEEPMDec 2022行过滤，其二维分布函数为：G(x，y)=122e-x2+y222(4)在离散化数字图像处理中其原理为使用一个33 的掩膜矩阵对图像进行卷积，该掩膜即高斯分布的离散化形式：G=-1-2-1000121(5)经过图像的滤波去噪以及光度立体算法测算表面朝向后，可以得到匣钵的表面法向量分布的朝向图。在该图像中各像素点的值不再是亮度值，而是物体表面各点法向量中平行于相机光轴（z 向）的分量的值。在该图像中，匣钵的裂纹位置处由于表面的朝向发生突变，导致在朝向图中表面纹理位置处法向量的 z 向分量存在不连续，因此使用了Laplace 梯度检测算子对该图像进行处理，在裂纹位置处的像素对该算子产生极大值响应，而匣钵表面的其他位置则对该算子产生响应较小。统计一块区域内所有响应较大的像素点，即可得到该裂纹的像素尺寸，将像素尺寸大于一定阈值的区域判定为裂纹，且输出该裂纹的像素尺寸6。裂纹与腐蚀脱皮缺陷的缺陷本质相同，均为表面不平整出现法向量的突变。对于腐蚀而言，其表面向量不连贯表现为区域状凹坑，而裂纹的表面向量的不连贯表现为线状，因此使用斑点特征检测算法对底面的朝向图进行处理，得到的结果中响应最大处即腐蚀脱皮形成的凹坑所在位置。统计图像中所有斑点特征检测结果的像素数量，即可计算出腐蚀面积占比。针对匣钵的缺口缺陷，由于