企业官网建设流程全解析

工厂数据少能训动AI吗：小样本+预训练+增量微调组合方案

TL;DR 速览

• 缺陷样本为零：走无监督异常检测（PatchCore / EfficientAD / FastFlow），只用良品图建模，良品 50–500 张即可冷启动，只判「像不像正常」，不分类。
• 缺陷样本每类 100–200 张：若业务需要知道缺陷类别与位置，走两阶段串联（异常检测预筛 + 监督细分类），兼顾低漏检与低误检。
• 缺陷样本每类 200–500 张：直接冻结 backbone 微调检测头（YOLO / RT-DETR 系），输出类别与位置，可量化。
• 选型判断：先数缺陷样本，再问「要不要输出缺陷类别」；三条路线最终都汇入样本回流池，攒够一批触发增量微调，让模型随产线一起长大。

目录

• 一、问题场景：缺陷样本为什么天然稀缺
• 二、技术原理：小样本能成立，靠的是三个前提
• 三、方案拆解：按数据家底选路线
• 四、数据验证：这条路线在真实产线上跑通过吗
• 五、小结
• 常见问题

先说结论：能，而且路径很成熟。工厂数据少不是「训不训得动」的问题，而是「选哪条路线」的问题。当前工业视觉场景下有三条被反复验证的路线：预训练 backbone 迁移（几百张良品就能起步的异常检测）、参数高效微调（只训万分之一的参数）、以及产线运行中的增量迭代。缺陷样本少不是拦路虎，拦路虎是没有把「缺陷少」这个事实设计进方案里。

一、问题场景：缺陷样本为什么天然稀缺

产线质检数据的分布是极度偏斜的。一条正常运行的产线良品率往往在 98% 以上，一天十万件产品里，某一类缺陷可能只出现几十件，还未必都能被抓拍留存。如果按传统监督学习的思路「每类缺陷准备几千张标注图再开工」，很多工厂的数据攒一年都不够。

更现实的问题是：缺陷类型不封闭。今天训好的模型只能认它见过的缺陷，明天工艺波动冒出一个新缺陷形态，监督模型对它就是零检出。这就是为什么「数据少」在工业场景不是边缘案例，而是常态——中国信通院在 2026 年 10 月的行业大会上就指出，近一半「人工智能+」应用场景停留在试点阶段未放量推广，数据底子薄是主要卡点之一（信通院，2026-10-15 济南人工智能产业大会）。

二、技术原理：小样本能成立，靠的是三个前提

前提一：预训练 backbone 已经把「看图能力」学完了。

在 ImageNet 等大规模数据集上预训练过的骨干网络，已经学会了边缘、纹理、形状这些通用视觉表征。工厂的任务不是从零学「怎么看图」，只是在这个表征之上学「什么算异常」。这就是为什么迁移学习下，缺陷检测所需的样本量比从零训练低一到两个数量级。

前提二：异常检测把问题从「认缺陷」换成「认良品」。

无监督异常检测（Unsupervised Anomaly Detection）只用良品图片建模「正常长什么样」，推理时输出与正常模式的偏离度。缺陷样本一张都不需要——这直接绕开了缺陷稀缺的死结。代表作 PatchCore（Roth et al., CVPR 2022）在工业异常检测标准基准 MVTec AD 上拿到图像级 AUROC 最高 99.6%，论文还专门验证了 few-sample（每类仅 1–16 张良品图）场景下依然有竞争力的表现（来源：CVPR 2022 论文《Towards Total Recall in Industrial Anomaly Detection》，Amazon/AWS）。

前提三：参数高效微调把「训得起」的门槛拉低了。

全量微调一个大模型要更新全部参数，显存和算力都扛不住。LoRA（Hu et al., 2021，微软）的做法是冻结预训练权重、只注入低秩矩阵参与训练——以 GPT-3 175B 为例，可训练参数量比全量微调减少一万倍、GPU 显存需求降低约 3 倍，且效果持平甚至略优（来源：arXiv:2106.09685）。同一思想在视觉模型微调上同样成立：冻结 backbone、只训检测头或少量适配层，几百张样本就能收敛。

三、方案拆解：按数据家底选路线

表中样本量为多篇工程实践文章的共识区间（CSDN 工程实践专栏 2025–2026 年多篇落地复盘交叉一致：监督方案每类缺陷 200–500 张收敛到可用水平，异常检测方案良品样本 50–500 张即可起步），不是标准，具体还要看缺陷形态复杂度和成像一致性。

把这张表翻译成决策路径更直观——先看手里有多少缺陷样本，再看业务上要不要输出缺陷类别，两条判断就能落到具体路线：

读图要点：缺陷样本为零时不必纠结分类能力，先让异常检测跑起来挡漏检；样本攒到每类一两百张时，再问一句「业务要不要知道这是哪类缺陷」——要，就走两阶段串联；只要判良/NG，继续用异常检测即可；每类攒到两三百张以上，才值得上监督检测微调，直接输出类别与位置。三条分支最终都汇入样本回流池，这也是路线能随产线一起进化的原因。

落到工程上，一个典型的组合流水线长这样：

[产线相机] → [图像预处理/畸变校正] │ ├─→ [异常检测引擎: PatchCore] ← 只用良品建模 │ │ 异常分数 > 阈值? │ ├─ 否 → 判良品, 放行 │ └─ 是 → 送第二级 │ └─→ [监督细分类: 微调检测头] ← 少量缺陷样本微调 │ 输出缺陷类别 + 位置 └─→ [样本回流池] ← 误报/漏报人工确认后回灌

其中「样本回流池」是增量微调的弹药库：产线每天跑，误报和漏报经人工确认后自动沉淀为新的标注样本，攒够一个批次（比如每类新增 50 张）就触发一轮增量微调——冻结主干、只训检测头，一次微调在单张消费级显卡上通常几十分钟到几小时就能完成，不用停产重训。

一个最小化的参数高效微调骨架（PyTorch 风格伪代码）：

# 冻结预训练 backbone，只训练检测头 + 低秩适配层model=build_detector(pretrained=True)forname,pinmodel.named_parameters():p.requires_grad=("head"inname)or("lora"inname)# 实际参与训练的参数量通常只占全模型的 0.5%–2%trainable=sum(p.numel()forpinmodel.parameters()ifp.requires_grad)total=sum(p.numel()forpinmodel.parameters())print(f"trainable ratio:{trainable/total:.4%}")# 增量微调: 新批次缺陷样本 + 少量旧样本回放(防灾难性遗忘)loader=mix_loader(new_defects,replay_ratio=0.2)train(model,loader,epochs=30,lr=1e-4)

回放（replay）这一步不能省——只拿新缺陷图训，模型会把旧缺陷忘干净，这就是持续学习里的「灾难性遗忘」问题。混 20% 左右的旧样本回放是经验上比较稳的做法。

上面是「有缺陷样本之后」的微调骨架。如果缺陷样本还是零，先跑下面这段基于 PatchCore 思路的无监督异常检测最小实现——只用良品图建模，三步走完：良品建模 → 异常分数计算 → 阈值判定。

importtorchimporttorch.nn.functionalasFfromtorchvision.modelsimportwide_resnet50_2,Wide_ResNet50_2_Weights# ========== 第 0 步：准备特征提取器（冻结的预训练 backbone） ==========# 用 ImageNet 预训练的 WideResNet50 做特征提取，权重全程冻结，不参与训练backbone=wide_resnet50_2(weights=Wide_ResNet50_2_Weights.IMAGENET1K_V1).eval()forpinbackbone.parameters():p.requires_grad=Falsedefextract_features(x):"""取 layer2 / layer3 的中层特征，兼顾纹理细节与语义信息"""feats=[]forname,moduleinbackbone.named_children():x=module(x)ifnamein("layer2","layer3"):feats.append(x)# 统一上采样到同一分辨率后拼接target_size=feats[0].shape[-2:]feats=[F.interpolate(f,size=target_size,mode="bilinear",align_corners=False)forfinfeats]returntorch.cat(feats,dim=1)# [B, C, H, W]# ========== 第 1 步：良品建模（只用正常样本，构建特征记忆库） ==========defbuild_memory_bank(good_loader,coreset_ratio=0.1):"""把良品图的 patch 特征压成一个记忆库，coreset 采样降低冗余"""bank=[]withtorch.no_grad():forimgsingood_loader:feat=extract_features(imgs)# [B, C, H, W]patches=feat.permute(0,2,3,1).reshape(-1,feat.shape[1])# [B*H*W, C]bank.append(patches)bank=torch.cat(bank,dim=0)# 随机 coreset 采样：保留 coreset_ratio 比例的特征点，控制显存与推理耗时idx=torch.randperm(bank.shape[0])[:max(1,int(bank.shape[0]*coreset_ratio))]returnbank[idx]# [M, C]，M 为记忆库大小memory_bank=build_memory_bank(good_loader)# 几十到几百张良品图即可# ========== 第 2 步：异常分数计算（每个 patch 找最近邻，取最大距离） ==========defanomaly_score(img,k=1):"""返回图像级异常分数与像素级异常热力图"""withtorch.no_grad():feat=extract_features(img)# [1, C, H, W]patches=feat.permute(0,2,3,1).reshape(-1,feat.shape[1])# [H*W, C]# 计算每个 patch 到记忆库所有特征的欧氏距离dist=torch.cdist(patches,memory_bank)# [H*W, M]# 取最近的 k 个邻居距离求均值，作为该 patch 的异常分数patch_scores=dist.topk(k,largest=False).values.mean(dim=1)score_map=patch_scores.reshape(1,1,*feat.shape[-2:])# 图像级分数 = 最异常 patch 的分数（局部缺陷不会被平均掉）img_score=patch_scores.max().item()returnimg_score,score_map# ========== 第 3 步：阈值判定（用良品验证集定阈值，避免拍脑袋） ==========defcalibrate_threshold(good_val_loader,sigma=3.0):"""在纯良品验证集上跑一遍，取 均值 + sigma*标准差 作为阈值"""scores=[anomaly_score(img)[0]forimgingood_val_loader]scores=torch.tensor(scores)return(scores.mean()+sigma*scores.std()).item()threshold=calibrate_threshold(good_val_loader)defpredict(img):"""产线推理入口：分数超阈值判 NG，并返回热力图供人工复核"""score,heatmap=anomaly_score(img)is_ng=score>thresholdreturn{"score":score,"threshold":threshold,"is_ng":is_ng,"heatmap":heatmap}

三步的分工很明确：良品建模把「正常长什么样」固化成记忆库，缺陷样本一张都不用；异常分数计算用最近邻距离衡量每个 patch 偏离正常的程度，取最大值作为图像级分数，保证小面积缺陷不被稀释；阈值判定在良品验证集上按 3σ 原则自动标定，比人工拍一个固定值稳得多。实际落地时把coreset_ratio调到 1%–10%、k取 1–9，就能在单张消费级显卡上做到毫秒级推理。

关键参数怎么调

上面这段代码能跑通，但真正决定产线效果的是四个参数。它们不是各自独立的旋钮，而是有先后顺序的——顺序错了，调一天也调不出稳定结果。

三条工程经验：

1. 良品图多样性不足时，先扩样本再调阈值。如果良品集只覆盖一种光照、一个批次，阈值无论怎么调都会在换批次时崩掉——这时把 sigma 调大只是把问题推迟。正确做法是先补不同光照、不同批次的良品图，让分数分布本身变窄，再重新标定阈值。
2. coreset_ratio和输入分辨率要一起定，且定完就冻结。这两个参数直接决定记忆库大小和推理耗时，中途改动会让之前标定的阈值全部失效。经验做法是先用 256 分辨率 + 5% 采样跑通全流程，确认检出能力够用后再往上加，而不是一上来就 512 + 10%。
3. 阈值必须在「没参与建模」的良品图上标定。用建模用的那批良品图算阈值，分数会偏乐观，上线后误检明显偏高。留出 20%–30% 的良品图专门做阈值标定，并且每次增量微调或换批次后都重新标一次，把阈值当成需要维护的配置而不是一次性常数。

四、数据验证：这条路线在真实产线上跑通过吗

几组可交叉验证的事实：

1. 学术基准：PatchCore 在 MVTec AD 上图像级 AUROC 99.6%（CVPR 2022），且论文明确报告了少样本场景的竞争力——说明「只用良品 + 少量样本」不是妥协方案，而是当前异常检测的最优解之一。
2. 参数效率：LoRA 论文（2021）证明冻结预训练权重、训低秩矩阵，可训练参数降一万倍而效果不降——这个结论过去五年被视觉、语音、NLP 各领域的跟进工作反复复现。
3. 产线实证：江苏海安一家涂布企业（浩驰科技）上线 AI 视觉检测后，不良率从 1.5% 降到 0.2%，缺陷数据回流控制系统调工艺参数——注意这个案例的关键机制正是「数据回流→持续调优」，而不是一次性训练到位（南通市政府官网，2026-07-28）。
4. 政策定调：工信部在 2026 年 10 月的国新办发布会上明确要求「开发先进适用的垂域模型」，「成熟一个、推广一个」（工信部总工程师王卫明，2026-10-20）。垂域模型的技术路线本身就是「通用底座 + 行业小样本适配」，与小样本路线是同一个逻辑。

五、小结

「工厂数据少能不能做 AI」这个问题的答案分三层：

• 缺陷样本为零→ 用无监督异常检测，良品图几十到几百张就能冷启动；
• 缺陷样本有几百张/类→ 冻结 backbone 微调检测头，或异常检测预筛 + 监督细分类两级串联；
• 数据会持续积累→ 把样本回流池和增量微调机制设计进系统，让模型随产线一起长大。

真正的门槛不是样本数量，是有没有把「缺陷天然稀缺」设计进架构。先让异常检测跑起来挡漏检，再让回流机制把每一天的生产变成训练数据——数据少，就这样一点点变多。

常见问题

Q：我们厂数据很少，能训得动 AI 吗？
能。缺陷样本一张都没有也能起步：无监督异常检测只需要良品图，几十到几百张就能建模「正常长什么样」。PatchCore 这类方法在工业标准基准上只用良品训练就做到了 99.6% 的图像级 AUROC。缺陷样本后续通过产线回流慢慢攒，攒够一批做一次增量微调。

Q：做 AI 质检到底需要多少张样本？
看路线。监督检测方案的经验区间是每类缺陷 200–500 张有效标注才能收敛到可用水平；无监督异常检测只需要良品，50–500 张起步；两阶段串联方案每类缺陷 100–200 张起步。注意样本多样性比数量重要——同一产线同一角度拍两千张，不如覆盖不同光照、不同批次的几百张。

Q：增量微调会不会把模型训坏，越训越差？
会有这个风险，叫「灾难性遗忘」——只喂新缺陷样本，模型会忘掉旧的。工程对策有两个：一是训练时混入 20% 左右的旧样本回放；二是冻结预训练主干、只微调检测头或低秩适配层，主干表征不动，遗忘就有限。每次增量微调后用固定的回归测试集验证旧缺陷检出率，不达标就回滚。

参考资料

1. Towards Total Recall in Industrial Anomaly Detection（PatchCore）— Roth et al., CVPR 2022，Amazon/AWS；arXiv:2106.08265。正文引用点：图像级 AUROC 99.6%、few-sample（每类 1–16 张良品图）场景验证。
2. LoRA: Low-Rank Adaptation of Large Language Models— Hu et al., 微软，2021；arXiv:2106.09685。正文引用点：可训练参数量减少一万倍、GPU 显存需求降低约 3 倍。
3. MVTec AD 工业异常检测基准数据集— MVTec Software GmbH，CVPR 2019 论文发布。正文引用点：PatchCore 图像级 AUROC 99.6% 的评测基准。
4. 济南人工智能产业大会相关发言— 中国信息通信研究院（信通院），2026-10-15。正文引用点：近一半「人工智能+」应用场景停留在试点阶段未放量推广，数据底子薄是主要卡点之一。
5. 浩驰科技 AI 视觉检测落地案例报道— 南通市人民政府官网，2026-07-28。正文引用点：江苏海安涂布企业不良率从 1.5% 降到 0.2%，缺陷数据回流控制系统调工艺参数。
6. 国新办新闻发布会（工业和信息化部）— 工信部总工程师王卫明，2026-10-20。正文引用点：「开发先进适用的垂域模型」「成熟一个、推广一个」。

关于作者：云湃智算（VASTIQ），专注制造业 AI 落地的技术团队，持续分享工业视觉检测、设备数据采集中踩过的坑和填坑方法。