做工业视觉项目的朋友应该都有过这种体验模型在测试集上的指标漂亮得能截图发朋友圈一到产线就被工艺工程师堵在门口。去年我在一个金属外壳外观检测项目里YOLOv5在验证集上的mAP超过0.95缺陷召回率也稳在0.93看起来“准”得不得了。但产线实际跑下来误检率一直在15%上下晃悠每检测100个报警里有15个是完好工件产线频繁停机人工复判岗位忙到冒烟。后来我用了一套“分层决策”重新设计检测后处理流程把误检率压到了2%以内同时召回率没有明显往下掉。这篇文章想把当时的完整思路、实施细节和踩过的坑都复盘一遍给同样被误检折磨的人一个可参考的路线。1. 为什么YOLO看起来准现场却不买账1.1 算法指标和产线口径不是一回事项目刚启动时我手上的离线数据集是白天在实验室里一批一批拍好的光照稳定、工件摆放位置固定、背景干净。模型在这个测试集上的mAP超过0.95缺陷召回率0.93误检率大概只有4%到5%。但一到现场问题就全冒出来了。产线是连续来料机台有振动环境光会变工件表面偶尔带着油污、水渍、灰尘有时候还有上一道工序留下的定位压痕。这些在离线数据集里都没出现过模型看到之后很容易把它们当成缺陷输出一个“高置信度”的误检框。现场统计的方式也很直接他们不看mAP只看一天报警多少次其中多少次拆开看是好的。按压缺、划痕、脏污这些类别口径一算误检率确实到了15%。这个现象给我最大的提醒是YOLO这类检测器解决的是“看得见”的问题但工业现场要解决的还有“拿得准”的问题。离线指标是在干净环境下算出来的而产线关心的是误检带来的停机、复判和漏放成本。如果只闷头提mAP不把评价口径对齐项目做得再辛苦也不被认可。1.2 高召回反而让误检的代价更大一开始我以为是模型还不够准于是把置信度阈值调低想多召回一些真正的缺陷。结果缺陷召回率稍微上去一点误检率跟着暴涨产线反而更不配合了。原因不难理解YOLO为了不放过真正的缺陷会把很多可疑区域都框出来尤其像反光点、纹理边界、倒角高光这类东西在局部图像上和浅划痕非常像。阈值越低这些假框出来得越多。更麻烦的是误检会形成“狼来了”效应。操作工一天看到几十次报警每次都要停下设备去确认确认了十几次全是误检后面再报警就懒得理了。这时候如果有一个真缺陷漏过去反而更危险因为人的注意力已经被训练成“报警没事”。所以从业务角度看十个漏检可能都没有五十个误检造成的实际损失大。这让我意识到如果只优化检测器本身不改变后端的决策逻辑召回率越高、误检越频繁项目就越难落地。1.3 调阈值、堆数据、换模型为什么都解决不了当时我试过三条路基本都走不通。第一条是调置信度阈值把阈值从0.25调到0.5、0.6误检率会降一些但缺陷召回率也开始掉。因为很多真实缺陷的置信度本来就不高整体一刀切只会把好样本和坏样本一起“切掉”。第二条是堆数据把现场拍的误检图一张张标注好了加进训练集结果模型是变好了一点但新误检又冒出来每个种类的误检都是长尾分布标了一个还有下一个数据标注成本高到项目组受不了。第三条是换模型尝试过更大的YOLOv5变体和YOLOv8指标确实略有提升但换汤不换药误检模式没有本质变化。后来我想明白了检测器在特征提取上已经很强大真正的问题出在“一张图只能给一个置信度”这种决策方式上。它缺少工艺知识也没有多帧或上下文信息更没有结合业务成本来做判断。继续在模型结构上卷不如在决策层做文章。这就是后面“分层决策”的出发点。2. 分层决策的核心思路把“一锤子买卖”拆成三道闸门2.1 一个模型干所有事其实承担了太多任务单层YOLO方案里检测器必须同时干三件事找到可疑区域、判断缺陷类别、判断“这到底是不是缺陷”。问题是最后一件事实质上属于工艺判断需要知道工件表面原本长什么样、这个位置允不允许有这种特征、光照是不是造成的干扰。这些信息很难全部塞进一个检测头的局部特征里。我当时的误检里有一大类是“模具压痕”这其实是良品自带的特征但在局部图里和“压伤”长得非常像。YOLO没有见过整张工件的模板也没有人告诉它“背面区域不许有压伤”它只能靠局部纹理猜。在这种场景下一个模型同时做检测和判定等于让一个没有工作经验的实习生只看一小块皮肤就判断是不是疤痕误判率高是必然的。2.2 三层结构找出来、验一下、再拍板分层决策的思想很简单不要让一个模型做完所有事而是把判断拆成三个阶段。第一层是检测层还是用YOLO输出候选框和初步类别但阈值可以故意调低一点目标是“宁可多找不要漏掉”。这一层负责的是召回率允许输出一些可疑框反正后面有处理。第二层是规则校验层把那些明显不符合物理规律和工艺约束的框过滤掉。比如面积太小、长宽比离谱、位置出现在不允许缺陷的区域、与当前工件模板的差值不够明显等。这一层不追求全只追求“每条规则都能解释清楚为什么是误检”。第三层是仲裁层用一个轻量级分类模型输入候选框裁剪图和上下文特征输出“真实缺陷概率”和风险等级。这一层学习的是“误检长什么样”而不是“缺陷长什么样”它能结合检测框的置信度、类别、区域、形态特征做综合判断。三层分别解决不同的问题缺一不可。检测层保证不漏规则层保证不蠢仲裁层保证不偏。2.3 为什么分层结构能同时保住召回率和准确率很多朋友第一反应是多包一层会不会把缺陷也过滤掉这里的关键是各层目标不同。第一层把阈值调低实际上是在刻意“牺牲精度换召回”真正决定精确率的是后面两层。第二层规则只针对那些有明确原因的误检比如“反光点、水渍、模具压痕”它们有很强的手工特征用规则过滤不会伤害大多数真实缺陷。第三层仲裁模型的训练数据来自第一层输出而不是原始标注集所以它见过大量“看起来像缺陷的干扰”有能力做最终裁决。我用一个比较生活化的类比以前是一个保安同时负责“发现可疑人员”和“判断是不是坏人”现在改成三步——巡逻发现所有形迹可疑的人安检根据证件和行李规则排除明显没问题的人最后主管根据监控和背景信息做决定。每一步都在降低误判而且每一步用的信息源都不一样不需要某一个环节“全能”。3. 把误检率从15%压到2%的落地过程3.1 第一步先给误检分类别急着写代码我先花了一周时间把项目上线两周内保存下来的所有报警截图全部翻了一遍。这里有个经验开始动手之前一定要把“误检是什么”搞清楚否则后面做的规则和仲裁模型都是在闭着眼睛优化。我把误检样本按照外观特征聚成几类反光点、倒角高光、模具压痕、水渍油污、灰尘颗粒、载具背景纹理。每一类下面再记录出现时的机位、光照方向、候选框位置和大小。统计之后发现反光点和模具压痕加在一起占了全部误检的70%这个结论直接决定了后面优先做什么。这个步骤的重要性在于它把“误检率15%”这个模糊数字拆成了一个个能动手解决的问题。后面每解决一类误检率就会肉眼可见地下降而不是对着一个综合指标瞎试。3.2 第二步用规则把一眼假的误检先干掉规则层我只写了五条目标是覆盖最容易识别的那部分误检每条规则都反复验证过确保不会误伤真实缺陷。第一条候选框面积小于某个绝对阈值直接过滤。因为现场真正需要管控的压伤和划痕都有最小尺寸小于0.2平方毫米的特征即使存在也不影响功能没必要报警。第二条候选框的长宽比大于10或者小于0.1直接过滤。这是为了一些图像噪点形成的极端细长框。第三条候选框中心落在指定禁检区域之外但某些工位只有中心区域需要检测边缘区域是夹具遮挡或倒角缺陷类别不允许出现在这里。第四条与当前工件标准模板的灰度差太小过滤掉。如果候选区域内灰度和正常区域差不多说明只是轻微纹理变化不是真缺陷。第五条如果同一位置在连续两帧中出现但位置偏移超过一个较大范围且面积变化率超过50%判断为动态干扰过滤掉。规则不能贪多。我一开始写了十几条什么边缘BLOB面积、最小外接矩形倾斜角、灰度均值阈值全加进去了结果误检率看着降了真实缺陷召回率却掉了一截。后来每加一条规则都用“两百个真缺陷三百个误检样本”跑一遍如果会误杀任何真缺陷就改条件或者干脆不要。3.3 第三步训练一个仲裁模型学“误检长什么样”规则把最蠢的误检过滤掉之后剩下的误检就比较狡猾了比如模具压痕和压伤单靠几个数值分不开。这时候上仲裁模型。仲裁模型不重新训练YOLO而是只处理检测层输出的候选框。从每个候选框里裁出固定尺寸的图片比如64乘64像素同时保留检测框的坐标、面积、长宽比、原始置信度、类别编号这些结构化特征。我还叠加了候选框区域的梯度直方图和与局部模板的差值图作为额外通道。标签就是“真缺陷”和“误检”二分类。训练数据来自第一层输出这个很关键。不能只从公开数据集里找正样本一定要从现场的真实输出里采样因为仲裁模型需要学的不是“缺陷是什么”而是“在这个产线上哪些东西看着像缺陷其实是干扰”。我先手工标注了两万多个样本其中真缺陷占30%误检占70%正负样本差距不算离谱。如果误检样本太多后面可以调整损失权重。模型结构不用复杂我当时用一个很小的分类网络输入图像加特征向量输出两个分数参数量只有十几万单张图片推理时间不到2毫秒。重点是特征怎么组合而不是网络多深。这个仲裁模型跑起来之后误检率一下子从8%降到了3%左右。3.4 第四步让决策和业务成本联动按风险分级放行模型输出的概率是一个0到1的分数如果还按以前“大于0.5就报警”来用最多只能把误检率压到3%到不了2%。后来我想到一个更实际的思路不一定每个疑似缺陷都要引起停线可以按风险等级走不同的业务路径。我设置了三个决策等级。风险分大于0.9进入红色等级直接触发停机并自动分拣0.6到0.9之间进入黄色等级报警但不立刻停机弹窗通知线边复判员复核低于0.6进入绿色等级只在系统后台记录日志不打扰产线。这样算下来真正让产线停机的只有高分报警误检造成的影响就大幅缩小了。同时不同工位的阈值可以单独配置。比如在最终出货前的外观检测工位缺陷后果严重我把红色阈值设成0.75宁可多报警在中间加工工序后的检测工位反正后面还有清洗和打磨我把红色阈值设到0.95尽量减少不必要停机。这种“决策和业务成本联动”的思路几乎不增加任何算力成本但对实际体验的提升非常明显。3.5 落地效果误检率掉到2%召回率基本没伤上线后的完整数据我整理成了表格前后对比一目了然。方案阶段缺陷召回率误检率平均单帧耗时单层YOLO阈值0.250.9315%12毫秒YOLO 规则过滤0.928%13毫秒YOLO 规则过滤 仲裁模型0.913%15毫秒加风险分级决策后的最终方案0.912%15毫秒缺陷召回率从0.93掉到0.91原因是仲裁模型确实会误杀极少一部分置信度不高但真实存在的缺陷。但产线日常更在意的误检率从15%降到了2%。原来一天停机30多次现在不到5次复判人员的工作量减少了一大半。更重要的是操作工不再天天被报警轰炸真正出现报警时他们愿意停下来看了。4. 踩过的坑和排查技巧实录4.1 规则越写越多误检率不降反升我前面提到我最初写了十几条规则那个版本差点让项目翻车。当时我只盯着误检样本每发现一个新的误检模式就迫不及待加一条规则去挡。结果规则之间互相叠加有些真实缺陷被组合条件误杀有些误检样本虽然被挡了但出现了新的“钻规则空子”的误检。后来我总结出一个工作习惯每条规则必须有正反例验证清单正面放十个真实缺陷反面放十个误检样本改动之后两个集合都得过否则不接受这条规则。这等于给规则层加了一个“回归测试”能拦住很多拍脑袋的决策。4.2 仲裁模型的正负样本比例千万别失衡得太夸张训练仲裁模型时因为第一层输出里大部分是误检如果不加控制正负样本比例会到1比9甚至1比20。模型训练出来之后几乎所有输出都会偏向“误检”真实缺陷都被压到低分区间召回率掉得厉害。后来我把真缺陷样本通过过采样和裁剪增强抬到占比30%左右同时在损失函数里给正样本加了1.5倍权重才把召回率稳住。还有个小坑仲裁模型的训练样本不能只收集一次。产线换料、调整光照、更换夹具之后会出现新的误检模式。我建议每隔两周从现场报警记录里抽样补充到训练集里做增量训练否则模型用久了会逐渐“脱节”。4.3 上线前一定要跑一遍“误检回归测试”这是我最想强调的经验。仲裁模型更新或者YOLO权重更新之后不能只看精度和召回率一定要准备一个固定的回归样本集把历史出现过的误检类型都放进去。这个回归集不需要太大我用了大概三千张图每次模型更新后跑一遍要求误检率不能高于上一版本更不能让某些旧误检重新冒出来。有一次我更新了一个检测头之后mAP和召回率都涨了但模具压痕误检突然又冒出来仔细一看是新的模型把某个纹理特征学得更敏感了。如果没有回归集这种问题一上线就会被产线立刻发现非常被动。4.4 常见问题排查速查表现象可能原因排查方向仲裁层输入候选框太多处理时间变长第一层YOLO阈值太低适当提高第一层置信度下限或者增加“可疑度初筛”规则过滤掉了真实缺陷规则条件过强或叠加过多用正反例回归集逐条验证给仲裁高分样本加豁免逻辑光照一变化就误检暴增现场光照未归一化参考模板过期增加光照归一化定期更新模板图仲裁模型对某类误检失效该类新误检没进训练集补充最新误检样本做增量训练风险分级后产线还是嫌误报多红色阈值设置过严按工位重新配置阈值平衡召回与停机影响这些排查经验不是一次到位的都是在反复救火过程中总结出来的。尤其第一条第一层如果阈值设到0.1候选框量会是0.25时的两三倍仲裁层再快也会成为瓶颈。实际操作中我会在第一层和仲裁层之间加一个极低成本的初筛比如置信度小于0.05的框直接丢掉能省很多事。在我个人经验里工业视觉项目真正难的点往往不在模型有多强而在怎么把模型输出和现场业务缝起来。YOLO这类检测器已经足够好用但“一个模型一把梭”的思路在复杂产线上确实走不远。分层决策不是推翻检测器而是在检测器外面包一层懂工艺、懂业务、懂成本的控制逻辑。如果你也在被误检率折磨建议先别急着换模型试着把现场报警截图分类归档你可能会有新的发现。
