摘要
随着光伏电站规模的不断扩大,太阳能板的缺陷检测成为保障发电效率与运行安全的关键环节。传统的人工巡检方式效率低、主观性强,难以满足大规模电站的实时监测需求。本文基于YOLO26目标检测算法,构建了一套针对红外图像中太阳能板典型缺陷的自动识别系统。系统可识别四类缺陷:Bypass Diode(旁路二极管异常)、Cell Fault(电池片故障)、Defects(其他缺陷)和 Hotspot(热斑)。实验采用自建红外图像数据集,其中训练集1897张、验证集222张、测试集113张。
详细功能展示视频
https://www.bilibili.com/video/BV1Tyd1BjEiB/?spm_id_from=333.1387.upload.video_card.click&vd_source=8279e3d5f4d5d4f0cb2bf5c842393764https://www.bilibili.com/video/BV1Tyd1BjEiB/?spm_id_from=333.1387.upload.video_card.click&vd_source=8279e3d5f4d5d4f0cb2bf5c842393764https://www.bilibili.com/video/BV1Tyd1BjEiB/
引言
太阳能作为一种清洁、可再生的能源,在全球能源结构中占比不断提升。光伏电站的安全稳定运行依赖于太阳能板组件的健康状况。然而,太阳能板在长期运行中容易受到环境、老化、制造缺陷等因素影响,产生各类故障,如电池片隐裂、热斑效应、旁路二极管失效等。这些缺陷若不及时发现,不仅会降低发电效率,还可能引发火灾等严重安全事故。
目前,光伏电站的缺陷检测主要依赖人工巡检或无人机拍摄后的肉眼判读,存在效率低、漏检率高、受天气和光照影响大等问题。红外热成像技术能够反映组件表面的温度分布,是识别热斑、旁路二极管异常等温度相关缺陷的有效手段。结合深度学习目标检测算法,可实现自动化、智能化的缺陷识别。
YOLO(You Only Look Once)系列算法因其检测速度快、精度高、易于部署等优势,在工业缺陷检测领域得到广泛应用。本文基于YOLO26框架,针对红外图像中太阳能板的四类典型缺陷,构建了一套自动识别检测系统,并对模型的检测性能进行了全面分析,以期为光伏智能运维提供技术支撑。
目录
摘要
引言
功能模块
1、用户管理模块
2、界面与交互模块
3、检测源管理模块
4、检测参数配置模块
5、YOLO检测核心模块
6、结果显示模块
7、结果保存模块
8、工具栏功能
9、辅助功能
10、数据校验模块
背景
数据集介绍
1. 缺陷类别
2. 数据集划分
训练结果
1、总体评价编辑
2、各类别性能分析(基于 PR 曲线)编辑
3、混淆矩阵分析(归一化)编辑
4、训练曲线分析(results.png)编辑
5、其他曲线辅助判断
Ultralytics YOLO26
概述
主要功能
常用标注工具
详细功能展示视频
功能模块
✅用户登录注册:支持密码检测,密码加密。
注册
登录
✅图片检测:可对图片进行检测,返回检测框及类别信息。
✅参数实时调节(置信度和IoU阈值)
✅支持选择检测目标:可以选择一个或者多个类目的目标进行检测
✅视频检测:支持视频文件输入,检测视频中每一帧的情况。
✅摄像头实时检测:连接USB 摄像头,实现实时监测。
✅日志记录:日志标签页记录操作和错误信息,带时间戳
✅结果保存模块:支持图片/视频/摄像头检测结果保存
1、用户管理模块
| 功能 | 描述 |
|---|---|
| 用户注册 | 用户名、密码、确认密码、邮箱(选填)注册,密码SHA256加密存储 |
| 用户登录 | 用户名密码验证,自动跳转主界面 |
| 用户数据存储 | JSON文件存储用户信息(密码加密、注册时间、邮箱) |
| 登录状态 | 主界面显示当前登录用户名 |
2、界面与交互模块
| 功能 | 描述 |
|---|---|
| 玻璃效果界面 | 半透明毛玻璃背景,圆角边框,现代化视觉风格 |
| 无边框窗口 | 自定义标题栏,支持窗口拖动、最小化、最大化、关闭 |
| 响应式布局 | 主窗口三栏布局(左侧控制区、中央显示区、右侧信息区) |
| 状态栏 | 显示设备信息、模型状态、当前用户、实时时间 |
3、检测源管理模块
| 功能 | 描述 |
|---|---|
| 图片检测 | 支持JPG/JPEG/PNG/BMP格式图片载入 |
| 视频检测 | 支持MP4/AVI/MOV/MKV格式视频载入 |
| 摄像头检测 | 实时调用摄像头(默认ID 0)进行检测 |
| 检测源切换 | 下拉菜单切换三种检测模式,自动更新界面状态 |
4、检测参数配置模块
| 功能 | 描述 |
|---|---|
| 置信度阈值 | 滑动条调节(0-100%,步长1%),实时显示当前值 |
| IoU阈值 | 滑动条调节(0-100%,步长1%),实时显示当前值 |
| 类别选择 | 动态生成检测类别复选框,支持全选/取消全选 |
| 参数同步 | 参数实时同步到检测器核心 |
5、YOLO检测核心模块
| 功能 | 描述 |
|---|---|
| 模型加载 | 加载best.pt模型文件,自动检测GPU可用性,支持CPU/GPU切换 |
| 多模式检测 | 图片检测、视频检测、摄像头实时检测 |
| 检测线程 | 基于QThread的多线程处理,避免界面卡顿 |
| 检测结果 | 返回目标类别、置信度、边界框坐标 |
| FPS计算 | 实时计算处理帧率 |
| 进度反馈 | 视频处理进度条实时更新 |
6、结果显示模块
| 功能 | 描述 |
|---|---|
| 实时画面 | 中央区域显示检测结果图像(带标注框) |
| 统计信息 | 检测状态、目标数量、FPS、处理帧数实时更新 |
| 检测列表 | 右侧列表显示当前帧所有检测到的目标(类别+置信度) |
| 日志记录 | 日志标签页记录操作和错误信息,带时间戳 |
| 占位显示 | 未选择检测源时显示系统LOGO和提示文字 |
7、结果保存模块
| 功能 | 描述 |
|---|---|
| 保存开关 | 复选框控制是否保存检测结果 |
| 路径选择 | 自定义保存路径,支持图片/视频格式自动识别 |
| 自动命名 | 保存文件自动添加时间戳(detection_result_20240101_120000.jpg) |
| 视频保存 | 支持检测结果视频录制(MP4格式) |
| 手动保存 | 工具栏保存按钮可随时保存当前画面 |
| 保存反馈 | 保存成功弹窗提示,日志记录保存路径 |
8、工具栏功能
| 功能 | 描述 |
|---|---|
| 图片按钮 | 快速切换到图片检测模式并打开文件选择器 |
| 视频按钮 | 快速切换到视频检测模式并打开文件选择器 |
| 摄像头按钮 | 快速切换到摄像头检测模式 |
| 保存按钮 | 手动保存当前显示画面 |
9、辅助功能
| 功能 | 描述 |
|---|---|
| 错误处理 | 统一错误弹窗提示,日志记录错误详情 |
| 资源清理 | 检测停止时自动释放摄像头、视频文件、视频写入器资源 |
| 时间显示 | 状态栏实时显示系统时间 |
| 模型状态 | 状态栏显示模型加载状态和当前设备(CPU/GPU) |
10、数据校验模块
| 功能 | 描述 |
|---|---|
| 注册验证 | 用户名长度≥3,密码长度≥6,密码一致性检查,邮箱格式验证 |
| 协议确认 | 注册前需勾选同意用户协议 |
| 文件校验 | 模型文件存在性检查,文件大小验证(≥6MB) |
| 输入非空 | 登录/注册时必填项非空检查 |
背景
光伏发电作为一种清洁、低碳的能源形式,在全球范围内得到了快速推广。截至2025年底,全球光伏累计装机容量已超过1500GW,且仍在以每年超过200GW的速度增长。随着光伏电站的大规模建设与长期运行,太阳能板的健康状态监测成为运维管理的核心任务之一。太阳能板长期暴露在户外环境中,承受高温、强紫外线、风沙、积雪等自然因素的侵蚀,加之制造过程中可能存在的隐性缺陷,极易出现电池片隐裂、热斑效应、接线盒故障、旁路二极管失效等问题。这些缺陷若未能及时发现与处理,不仅会直接降低光伏组件的发电效率,还可能因局部过热引发火灾,造成严重的安全事故和经济损失。
传统的光伏缺陷检测方法主要依赖人工巡检与手持热成像仪检测。运维人员定期对电站进行巡查,利用红外热成像仪拍摄组件图像,再通过肉眼判断是否存在异常。这种检测方式存在明显局限性:一是效率低下,面对数千甚至数万块组件,人工方式难以实现高频次、全覆盖的检测;二是主观性强,检测结果依赖于人员的经验水平,不同人员之间判断标准不一,漏检率与误检率较高;三是受环境条件影响大,如光照、温度、时间等因素都会影响红外成像质量。此外,随着光伏电站向沙漠、戈壁、山地等偏远地区布局,人工巡检的成本与难度进一步增加。
近年来,无人机搭载红外热成像设备的巡检方式逐渐普及,极大地提升了数据采集效率。然而,随之而来的海量图像数据仍需依赖人工判读,成为新的瓶颈。因此,如何从红外图像中自动、准确地识别太阳能板缺陷,成为智能运维领域的研究热点。
深度学习技术的快速发展,特别是卷积神经网络在目标检测任务中的成功应用,为光伏缺陷自动识别提供了新的技术路径。YOLO系列算法作为单阶段目标检测的代表,具有检测速度快、精度高、模型轻量化的特点,非常适合于嵌入式设备与实时检测场景。在光伏缺陷检测领域,已有研究尝试将YOLO应用于电致发光(EL)图像和可见光图像中的缺陷识别,但针对红外图像中的热斑、旁路二极管异常等温度相关缺陷的研究仍相对较少。红外图像与可见光图像在成像原理、特征表达上存在显著差异,红外图像分辨率较低、纹理细节少、背景与目标对比度不高,对检测模型提出了更高的要求。
因此,构建一套面向红外太阳能板图像的YOLO缺陷识别检测系统,不仅能够填补该领域应用研究的空白,也为光伏电站实现智能化、自动化运维提供了可行方案。
数据集介绍
1. 缺陷类别
本数据集共包含四类太阳能板缺陷,具体如下:
| 类别名称 | 说明 |
|---|---|
| Bypass Diode | 旁路二极管异常,通常表现为局部温度异常升高或失效 |
| Cell Fault | 电池片故障,如隐裂、碎片、老化等导致的性能下降 |
| Defects | 其他类型缺陷,包括表面污损、接线盒异常等 |
| Hotspot | 热斑效应,由局部遮挡或电池片失配引起的过热区域 |
2. 数据集划分
数据集共计2232张红外图像,按如下方式划分:
| 数据集 | 图像数量 | 用途 |
|---|---|---|
| 训练集 | 1897张 | 模型训练 |
| 验证集 | 222张 | 超参数调优与模型选择 |
| 测试集 | 113张 | 最终性能评估 |
训练结果
1、总体评价![]()
模型在Bypass Diode和Cell Fault两类缺陷上表现较好,但在Hotspot类别上表现明显偏弱,整体 mAP@0.5 为0.651,属于中等水平,仍有优化空间。
2、各类别性能分析(基于 PR 曲线)![]()
| 类别 | AP@0.5 | 评价 |
|---|---|---|
| Bypass Diode | 0.780 | 表现良好,识别较准确 |
| Cell Fault | 0.759 | 表现良好,略低于 Bypass Diode |
| Hotspot | 0.414 | 表现较差,存在明显漏检或误检 |
| all classes | 0.651 | 整体平均精度一般 |
3、混淆矩阵分析(归一化)![]()
从confusion_matrix_normalized.png可以看出:
Bypass Diode:
正确分类率77%
主要误检为Hotspot(16%)和Background(19%)
Cell Fault:
正确分类率80%
误检主要集中在Hotspot(32%),说明这两类在红外图像中特征相似
Hotspot:
正确分类率仅65%
大量被误判为Cell Fault(52%),说明类别间边界模糊
Background:
正确率低(仅 31%),大量背景被误判为各类缺陷,说明模型对背景与缺陷的区分能力不足
4、训练曲线分析(results.png)![]()
从训练过程来看:
损失曲线:
train/box_loss、train/cls_loss持续下降,说明模型在收敛val/box_loss和val/cls_loss在后期趋于平稳,未见明显过拟合
精度与召回率:
metrics/precision(B)和metrics/recall(B)稳定在0.70 左右
5、其他曲线辅助判断
F1-Confidence Curve:
最佳 F1 值为0.68,对应置信度约0.32,说明模型在低置信度下综合表现更优
Recall-Confidence Curve:
在置信度为 0 时 Recall 为 0.79,
Ultralytics YOLO26
概述
Ultralytics YOLO26 是 YOLO 系列实时对象检测器的最新演进,从头开始专为边缘和低功耗设备而设计。它引入了简化的设计,消除了不必要的复杂性,同时集成了有针对性的创新,以实现更快、更轻、更易于访问的部署。
YOLO26 的架构遵循三个核心原则:
- 简洁性:YOLO26是一个原生的端到端模型,直接生成预测结果,无需非极大值抑制(NMS)。通过消除这一后处理步骤,推理变得更快、更轻量,并且更容易部署到实际系统中。这种突破性方法最初由清华大学的王傲在YOLOv10中开创,并在YOLO26中得到了进一步发展。
- 部署效率:端到端设计消除了管道的整个阶段,从而大大简化了集成,减少了延迟,并使部署在各种环境中更加稳健。
- 训练创新:YOLO26 引入了MuSGD 优化器,它是SGD 和MUON的混合体——灵感来源于 Moonshot AI 在 LLM 训练中Kimi K2的突破。该优化器带来了增强的稳定性和更快的收敛,将语言模型中的优化进展转移到计算机视觉领域。
- 任务特定优化:YOLO26 针对专业任务引入了有针对性的改进,包括用于Segmentation的语义分割损失和多尺度原型模块,用于高精度姿势估计的残差对数似然估计 (RLE),以及通过角度损失优化解码以解决旋转框检测中的边界问题。
这些创新共同提供了一个模型系列,该模型系列在小对象上实现了更高的精度,提供了无缝部署,并且在CPU 上的运行速度提高了 43%— 使 YOLO26 成为迄今为止资源受限环境中最实用和可部署的 YOLO 模型之一。
主要功能
DFL 移除
分布式焦点损失(DFL)模块虽然有效,但常常使导出复杂化并限制了硬件兼容性。YOLO26 完全移除了 DFL,简化了推理过程,并拓宽了对边缘和低功耗设备的支持。端到端无NMS推理
与依赖NMS作为独立后处理步骤的传统检测器不同,YOLO26是原生端到端的。预测结果直接生成,减少了延迟,并使集成到生产系统更快、更轻量、更可靠。ProgLoss + STAL
改进的损失函数提高了检测精度,在小目标识别方面有显著改进,这是物联网、机器人、航空影像和其他边缘应用的关键要求。MuSGD Optimizer
一种新型混合优化器,结合了SGD和Muon。灵感来自 Moonshot AI 的Kimi K2,MuSGD 将 LLM 训练中的先进优化方法引入计算机视觉,从而实现更稳定的训练和更快的收敛。CPU推理速度提升高达43%
YOLO26专为边缘计算优化,提供显著更快的CPU推理,确保在没有GPU的设备上实现实时性能。实例分割增强
引入语义分割损失以改善模型收敛,以及升级的原型模块,该模块利用多尺度信息以获得卓越的掩膜质量。精确姿势估计
集成残差对数似然估计(RLE),以实现更精确的关键点定位,并优化解码过程以提高推理速度。优化旋转框检测解码
引入专门的角度损失以提高方形物体的检测精度,并优化旋转框检测解码以解决边界不连续性问题。
常用标注工具
假设您现在准备好进行标注。有几种开源工具可以帮助简化数据标注流程。以下是一些有用的开放标注工具:
Label Studio:一个灵活的工具,支持各种标注任务,并包含用于管理项目和质量控制的功能。 CVAT:一个强大的工具,支持各种标注格式和可定制的工作流程,使其适用于复杂的项目。 Labelme:一个简单易用的工具,可以快速标注带有多边形的图像,非常适合简单的任务。 LabelImg: 一款易于使用的图形图像标注工具,特别适合以 YOLO 格式创建边界框标注。
这些开源工具经济实惠,并提供一系列功能来满足不同的标注需求。
界面核心代码:
详细功能展示视频
https://www.bilibili.com/video/BV1Tyd1BjEiB/?spm_id_from=333.1387.upload.video_card.click&vd_source=8279e3d5f4d5d4f0cb2bf5c842393764https://www.bilibili.com/video/BV1Tyd1BjEiB/?spm_id_from=333.1387.upload.video_card.click&vd_source=8279e3d5f4d5d4f0cb2bf5c842393764https://www.bilibili.com/video/BV1Tyd1BjEiB/