大数跨境

基于机器视觉的⌈带钢表面⌋缺陷检测方法

基于机器视觉的⌈带钢表面⌋缺陷检测方法 矩视智能
2022-08-02
0
我国一直是钢铁生产和使用大国,随着疫情后的经济复苏,2021年全国粗钢产量达到10.328亿t,历史上首次突破10亿t,约为全球粗钢产量的54.02%。同时统计数据显示,全国粗钢消费量约9.95亿t。

热轧带钢是钢铁行业中的主要原材料之一,具有耐腐蚀性、强韧性、便于加工的优点,在航空航天、土地建筑、汽车制造等领域备受青睐。自2000年以后,我国工业发展迅速,对热轧带钢的需求日益旺盛,轧制生产技术得到很大的发展,生产线也扩充到上百条。

在热轧带钢的生产技术要求中,尺寸精度、版型、表面质量和性能是衡量带钢产品质量的四大关键因素。带钢又是单位体积表面积最大的一种钢材产品,多用于外围构件,表面质量至关重要。

带钢实际生产过程中,由于生产工艺或者生产环境等因素的限制,导致带钢表面易出现裂纹、斑块等缺陷, 这不仅有损产品外观,而且使产品更易锈蚀和破裂。

所以在热轧带钢生产线上存在质量检测环节,据此可将缺陷产品进行回炉重造,做到及时止损。在互联网、大数据不断推动信息化、智能化高速发展的时代,国务院在 2015 年发布了《中国制造2025》,将人工智能作为提升国家竞争力、维护国家利益和安全的重大战略。

因此,传统的钢铁企业必须尽快完成产业升级,提高产品质量,控制生产成本,这样才能在激烈的国际竞争环境下更好更快的发展。

01 早期带钢表面缺陷检测方法


根据缺陷模式的不同,常见的热轧带钢表面缺陷大致可分为6种。


早期带钢表面缺陷检测方法主要包括人工检测法、涡流检测法、红外检测法、漏磁检测法、激光扫描检测法等。

人工检测法是上世纪50至60年代国际上通用的带钢表面缺陷检测方法,通常是由工作人员在生产线上用肉眼去判断是否存在缺陷,有时会使用光源频闪的办法来提高人眼观测的效率。但由于生产线的速度不断加快、人眼视觉灵敏度等影响,人工检测方法无法可靠地捕获缺陷信息,从而产生大量的漏检,另外,工作人员长期处在嘈杂、高温、强光、振动、粉尘的工业生产环境中,不仅影响身体健康,而且容易产生大脑和视觉疲劳等身体负担导致评判标准不一,进而误判。因此,人工检测法存在劳动强度大、效率和准确率低等问题,易造成诸多不必要的损失。

涡流检测法是利用交流线圈靠近钢板缺陷,钢板内部会产生交变电流,进而通过接受线圈返回的信号判断是否存在缺陷。涡流检测对表面状态的要求较高,大面积缺陷对其检测速度的影响较大,不适宜在高速轧制钢板的生产线上使用。

红外检测法是根据带钢表面深浅不同引起的温度变化来判断表面是否存在缺陷。通常是通过在钢坯传送辊道上安置一个高频感应线圈来获取钢坯表面产生的感应电流,缺陷区域感应电流行程增大,电能消耗加剧,进而引起钢坯表面温度的局部上升,通过红外检测仪捕获温度变化来完成对表面缺陷的检测。然而仅通过获取的温度很难对缺陷区域进行精确分类。

漏磁检测法是使用磁轭将钢坯磁化,若钢坯内部均匀无缺陷,钢坯表面几乎无磁场;若钢坯存在缺陷,磁通会产生畸变,形成漏磁场。但缺陷区域较小时很难形成漏磁场,漏磁检测法难以满足实际应用的需求。

激光扫描检测法是上世纪 70至 80年代最常用的钢铁表面缺陷检测方法。其工作原理是激光经多面体棱镜投射到钢板表面,经光电倍增管接受钢板表面发射和散射的光线且将其转化为电信号后,送入计算机进行处理和分析。然而实际生产线中的粉尘和物质会严重影响光线的反射,使得激光扫描检测法的应用受到限制。

02 机器视觉带钢表面缺陷检测方法


随着硬件设备与机器视觉技术的发展, 低成本、效率高且方便维护的基于机器视觉的带钢表面缺陷检测系统成为主流,其可靠性、高效性、实用性都远优于早期的带钢表面缺陷检测方法。



目前,基于机器视觉的表面缺陷检测方法主要分为传统与深度学习方法两种。


传统的机器视觉带钢表面缺陷检测方法



传统机器学习的缺陷检测方法通常包含特征提取与分类器调试两部分。

图像的特征提取可理解为从高维图像空间到低维特征空间的映射,基本思想是使目标在得到的子空间中具有较小的类内聚散度和较大的类间聚散度,其有效性对后续缺陷目标识别精度、计算复杂度、鲁棒性等均有较大影响。

深度学习的带钢表面缺陷检测方法



实际工业生产中,由于检测对象在形状、大小、纹理、颜色、背景、布局和成像光照等方面差异较大,使得复杂环境下对缺陷进行检测分类成为一项艰巨任务。在深度学习的背景下,卷积神经网络因具有强大的端对端自动特征提取能力,被广泛用于表面缺陷检测,根据检测任务的不同可分为分类网络、目标检测、实例分割。

一般来说 ,基于CNN 的网络通常采用现有的网络结构,或者针对实际的应用问题搭建轻量级的网络结构。其基本思想是输入一副图像,通过反向传播进行网络自 主学习,最终输出该图像的类别和该类别的置信度。

表面缺陷检测系统的基本结构如图所示。构成装置是,①摄像机和光源(LED、荧光灯等)、②图像处理计算机、③数据储存/确认控制用PC。表面缺陷检测系统将摄像机拍摄到的被检查对象的连续图像输送到图像处理计算机,对图像进行实时处理,对缺陷进行判定检查。检查结果被输送到数据储存/确认控制用PC。PC上显示出带钢展开图和缺陷图像,并保存在PC中。当检查到缺陷时,警报器发出警告鸣声。



机器视觉带钢表面缺陷检测方法的应用比较


传统方法的主要优点是不需大量图像样本参与训练,检测速度较快;主要缺点是需手工制作特征,易受检测环境的影响,漏检与误检较多,从而导致方法局限性很大。

深度学习方法的主要优点是端对端的自主学习,检测性能较高,拓展性强;缺点是需大量样本参与训练,速度较慢。


表2为机器视觉带钢表面缺陷检测方法的应用效果:


由表2可看出:早年普遍采用传统方法进行带钢表面缺陷检测,近年基于深度学习的检测方法逐渐成为主流。


文献[11,14,17,18,45]采用局部异常的检测方法检测带钢表面缺陷,检测速度快,平均检测率约94%;

文献[21,22,46,47]采用模板匹配对多类带钢表面缺陷进行检测,检测速度较快,检测准确度在90%以上;

文献[26,27,48-56]使用基于机器学习的检测方法,如集成模型、BP神经网络低、SVM等,将识别各类缺陷的准确率提升至 95%左右;

文献[35,57-66]利用 CNN模型, 如 ResNet, DensNet, MobileNet等, 进一步将识别准确度提高至97%左右;

03 机器视觉带钢表面缺陷检测技术难点与发展趋势


技术难点

目前,基于机器视觉的表面缺陷检测方法在理论研究与工业现场实际应用环节均取得了可观的成果,但面临以下技术问题和难点需要解决:

1) 图像采集环节易受到现场生产环境和工艺的影响,如光照强弱、噪声干扰等因素,会导致相同类别的缺陷差异较大、不同类别的缺陷差异较小, 进而影响模型的学习能力。

如何构建稳定、可靠、鲁棒的检测系统,以适应光照变化、噪声以及其他外界不良环境的干扰,是需要考虑的问题。

2) 传统机器视觉的检测方法主要依赖人工制作特征,特征制作的好坏对检测性能起决定性作用,同一条件下不同研究人员获得的检测性能也不一定相同。

因此,如何降低特征提取的复杂度和不确定性是需要解决的问题之一。

3) 工业现场很难收集到海量的缺陷样本, 多数是良性样本且缺陷种类繁多。即使传统方法不需大量的缺陷样本参与训练,然而其泛化能力较差。获取足够的缺陷样本是保证实际应用中模型检测性能与鲁棒性能好的前提,此外类别不平衡也是基于机器视觉的表面缺陷检测技术在实际应用中的难题之一。

4) 大部分机器视觉的表面缺陷检测方法属于有监督的学习标注方法,尤其对于深度学习方法,数据标注的成本昂贵且耗时。

因此,如何解决样本标注问题是一个有应用前景的研究。

5) 深度学习的检测方法检测性能较好、鲁棒性较强,然而在网络方面是一个漫长的设计和调整过程。此外,深度学习的模型存在计算量巨大、占用内存也大等问题,难以部署在实际工业生产中。

如何保证检测精度的同时提高检测速度是现阶段需要考虑的问题。

发展趋势

随着计算机技术、传感器技术以及运算处理设备的发展,基于机器视觉的带钢表面缺陷检测技术也必将得到进一步发展,其发展趋势主要表现如下:

1) 基于机器视觉的表面缺陷检测技术基本离不开数据的标注,而数据标注的成本昂贵且耗时。因此,开发一种自 动数据标注的应用软件是非常有意义的。

2) 基于机器视觉的传统方法需要手工提取特征、选择分类器、调试参数,而基于深度学习的方法需要手工设计网络,这种人为参与的工作通常不是最优的。随着计算机技术以及硬件设备的升级换代,自 动机器学习和网络架构搜索技术必将逐步代替人工设计。

3) 目前基于机器视觉的检测方法主要是针对二维图像数据,而二维图像的视野信息比较单一,无法充分表达产品各方位的视野信息。因此,通过多个工业相机配合收集目标的三维空间信息,实现对缺陷的三维检测是未来的主要发展趋势之一。

4) 基于深度学习的方法检测精度高,然而存在计算量巨大且难以部署在资源受限的硬件设备上,近年轻量化网络的提出缓解了这一现象, 但却是牺牲检测精度来换取检测速度。因此, 使用模型压缩移除模型冗余参数、降低模型复杂度以提高缺陷检测系统的实时性,是未来在线检测系统部署在实际工业生产中的主要趋势。

04 结 论


机器视觉的带钢表面缺陷检测方法主要包括基于图像处理/机器学习的机器检测方法和目前较为主流的基于深度学习的检测方法。


基于图像处理/机器学习的机器检测方法通常包括图像采集与标注、图像预处理、特征提取与识别等流程;

基于深度学习的检测方法通常包括图像的采集、分类/检测/分割数据集的构建与标注、分类/检测/分割网络的设计与搭建。

每一个流程都至关重要,直接影响缺陷检测系统的最终性能和效率。

因此,如何构建高质量且信息更为丰富的数据集、选择合适的算法,提高系统的稳定性、检测性能和检测速度,是机器视觉部署在实际工业现场的关键所在。

素材来源:
安徽工业大学学报(自然科学版)第39卷 第2期
基于机器视觉的热轧带钢表面缺陷检测研究进展

浅析带钢纵剪线上的表面缺陷检测

仅作为学术分享,侵权联系删除



矩视智能机器视觉低代码平台是一个面向机器视觉应用的云端协同开发平台,始终秉承0成本、0代码、0门槛、0硬件的产品理念。

平台以人工智能技术为核心,在机器视觉应用开发环节,为开发者提供图像采集、图像标注、算法开发、算法封装和应用集成的一站式完整工具链。覆盖字符识别、缺陷检测、目标定位、尺寸测量、3D测量、视频开发等上百项通用功能,致力于成为全球用户量最多,落地场景最广泛的机器视觉低代码平台。

现在长按下方二维码,即可获得立即免费试用机会!


如果您有相关检测需求
可扫码申请  ·  免费试用
👇👇👇
申请后我们会有工作人员第一时间与您联系
请耐心等待!
—往期回顾—



更多功能正在开发中,最新信息会第一时间在官方公众号进行公布,大家持续关注哦!

【声明】内容源于网络
0
0
矩视智能
1234
内容 312
粉丝 0
矩视智能 1234
总阅读0
粉丝0
内容312