YOLO26如何涨点系列篇(NEU-DET缺陷检测) | CVPR2026 DEGConv方向引导边缘门控,破解细长裂缝检测难题 ,实现涨点

张开发
2026/4/24 3:01:17 15 分钟阅读

分享文章

YOLO26如何涨点系列篇(NEU-DET缺陷检测) | CVPR2026 DEGConv方向引导边缘门控,破解细长裂缝检测难题 ,实现涨点
DEGConv模块引入YOLO的核心优势及解决的问题问题点YOLO在裂缝检测中面临的核心问题1感受野局限标准卷积核难以捕捉裂缝的长程连续性与不规则分支结构。2方向性特征缺失裂缝常沿多方向延伸普通卷积缺乏对方向敏感的特征提取能力。3纹理与边缘模糊裂缝在图像中常表现为低对比度、细线状结构易被背景噪声淹没。4拓扑结构建模不足裂缝的交叉、重叠、分叉等复杂拓扑关系难以被传统卷积有效编码。总结DEGConv通过方向先验嵌入、边缘增强卷积和动态门控三大机制针对性解决了YOLO在处理裂缝类细长、多方向、低对比度目标时的特征提取不足问题显著提升了裂缝检测的精度与鲁棒性。本文改进DEGConv结合YOLO26的C3k2模块进行二次创新。 在NEU-DET数据集下验证原始mAP50原始为 0.722提升至 0.732 R 原始为0.643 提升至 0.682 mAP50-95原始为0.407提升至0.413博主简介​AI小怪兽 | 计算机视觉布道者 | 视觉检测领域创新者深耕计算机视觉与深度学习领域专注于视觉检测前沿技术的探索与突破。长期致力于YOLO系列算法的结构性创新、性能极限优化与工业级落地实践旨在打通从学术研究到产业应用的最后一公里。 核心专长与技术创新YOLO算法结构性创新于CSDN平台原创发布《YOLOv13魔术师》、《YOLOv12魔术师》等全系列深度专栏。系统性提出并开源了多项原创自研模块在模型轻量化设计、多维度注意力机制融合、特征金字塔重构等关键方向完成了一系列突破性实践为行业提供了具备高参考价值的技术路径与完整解决方案。技术生态建设与知识传播独立运营“计算机视觉大作战”公众号粉丝1.6万成功构建高质量的技术交流社群。致力于将复杂算法转化为通俗易懂的解读与可复现的工程代码显著降低了计算机视觉的技术入门门槛。 行业影响力与商业实践荣获腾讯云年度影响力作者与创作之星奖项内容质量与专业性获行业权威平台认证。全网累计拥有7万垂直领域技术受众专栏文章总阅读量突破百万在目标检测领域形成了广泛的学术与工业影响力。具备丰富的企业级项目交付经验曾为工业视觉检测、智慧城市安防等多个关键领域提供定制化的算法模型与解决方案驱动业务智能化升级。 未来方向与使命秉持“让每一行代码都有温度”的技术理念未来将持续聚焦于实时检测、语义分割及工业缺陷检测的商业化闭环等核心方向。愿与业界同仁协同创新共同推动技术边界以坚实的技术能力赋能实体经济与行业变革。原创自研系列26年计算机视觉顶会创新点《YOLO26魔术师》原创自研系列25年计算机视觉顶会创新点《YOLOv13魔术师》《YOLOv12魔术师》《YOLO11魔术师》《YOLOv8原创自研》《YOLOv5原创自研》《YOLOv7原创自研》《YOLOv9魔术师》​《YOLOv10魔术师》 ​应用系列篇《YOLO小目标检测》《深度学习工业缺陷检测》《YOLOv8-Pose关键点检测》23、24年最火系列加入24年改进点内涵100优化改进篇涨点小能手助力科研好评率极高《YOLOv8魔术师》《YOLOv7魔术师》《YOLOv5/YOLOv7魔术师》《RT-DETR魔术师》1.YOLO26原理介绍论文https://arxiv.org/pdf/2509.25164摘要本研究对Ultralytics YOLO26进行了全面分析重点阐述了其关键架构改进及其在实时边缘目标检测中的性能基准测试。YOLO26于2025年9月发布是YOLO系列最新、最先进的成员专为在边缘及低功耗设备上实现高效、精确且易于部署的目标而构建。本文依次详述了YOLO26的架构创新包括移除了分布焦点损失DFL采用端到端的无NMS推理集成了渐进损失ProgLoss与小目标感知标签分配STAL以及引入了用于稳定收敛的MuSGD优化器。除架构外本研究将YOLO26定位为多任务框架支持目标检测、实例分割、姿态/关键点估计、定向检测及分类。我们在NVIDIA Jetson Nano与Orin等边缘设备上呈现了YOLO26的性能基准测试并将其结果与YOLOv8、YOLOv11、YOLOv12、YOLOv13及基于Transformer的检测器进行比较。本文进一步探讨了其实时部署路径、灵活的导出选项ONNX、TensorRT、CoreML、TFLite以及INT8/FP16量化技术。文章重点展示了YOLO26在机器人、制造业及物联网等领域的实际应用案例以证明其跨行业适应性。最后讨论了关于部署效率及更广泛影响的见解并展望了YOLO26及YOLO系列的未来发展方向。关键词YOLO26边缘人工智能多任务目标检测无NMS推理小目标识别YOLOYou Only Look Once目标检测MuSGD优化器Detection (COCO)结构框图如下1.1 YOLO11 vs YOLO26结构差异性1.1.1 SPPF 核心差异对比1池化次数灵活性YOLO11 的 3 次池化是硬编码的要修改必须改源码YOLO26 通过n参数可灵活调整比如设为 2 次或 4 次无需改核心逻辑。2Shortcut 设计YOLO26 新增的残差连接能缓解深层网络的梯度消失问题提升特征复用能力而 YOLO11 无此设计。3激活函数控制YOLO26 禁用 Conv1 的激活函数让特征在池化前保持更 “原始” 的状态是工程上对特征提取的优化。源码位置ultralytics/nn/modules/block.py1.1.2 C3k2 核心差异对比1注意力机制的新增YOLO26 的 C3k2首次引入PSABlock金字塔注意力模块通过attn参数控制是否启用这是两者最核心的功能差异 —— 启用后模块会先通过 Bottleneck 提取基础特征再通过 PSABlock 增强关键区域的特征权重提升小目标 / 复杂场景的检测效果。2分支逻辑的扩展YOLO11 的分支仅受c3k控制而 YOLO26 的分支逻辑优先级为attn c3k即只要attnTrue会优先启用注意力模块忽略c3k的配置。重复模块m (n次迭代): ┌─────────────────────────────────────────────────────────┐ │ │ │ 如果 attnTrue: │ │ Sequential( │ │ Bottleneck(self.c, self.c), │ ←─ 先特征提取 │ PSABlock(self.c, attn_ratio0.5, num_heads...) │ ←─ 后注意力增强 │ ) │ │ │ │ 否则如果 c3kTrue: │ │ C3k(self.c, self.c, 2) │ ←─ 同YOLOv11 │ │ │ 否则: │ │ Bottleneck(self.c, self.c) │ ←─ 同YOLOv11 │ │ └─────────────────────────────────────────────────────────┘YOLO26 C3k2代码源码位置ultralytics/nn/modules/block.py1.2 YOLO26核心创新点YOLO26引入了多项关键架构创新使其区别于前几代YOLO模型。这些增强不仅提高了训练稳定性和推理效率还从根本上重塑了实时边缘设备的部署流程。本节将详细描述YOLO26的四项主要贡献i移除分布焦点损失DFLii引入端到端无NMS推理iii新颖的损失函数策略包括渐进损失平衡ProgLoss和小目标感知标签分配STAL以及iv开发用于稳定高效收敛的MuSGD优化器。我们将详细讨论每一项架构增强并通过对比分析突显其相对于YOLOv8、YOLOv11、YOLOv12和YOLOv13等早期YOLO版本的优势。1.2.1 创新点1移除分布焦点损失DFLYOLO26最重要的架构简化之一是移除了分布焦点损失DFL模块图3a该模块曾存在于YOLOv8和YOLOv11等早期YOLO版本中。DFL最初旨在通过预测边界框坐标的概率分布来改进边界框回归从而实现更精确的目标定位。虽然该策略在早期模型中展示了精度提升但也带来了不小的计算开销和导出困难。在实践中DFL在推理和模型导出期间需要专门处理这使针对ONNX、CoreML、TensorRT或TFLite等硬件加速器的部署流程变得复杂。源码位置ultralytics/utils/loss.py通过reg_max 设置为1移除了分布焦点损失DFLclass BboxLoss(nn.Module): Criterion class for computing training losses for bounding boxes. def __init__(self, reg_max: int 16): Initialize the BboxLoss module with regularization maximum and DFL settings. super().__init__() self.dfl_loss DFLoss(reg_max) if reg_max 1 else None1.2.2 创新点2端到端无NMS推理YOLO26从根本上重新设计了预测头以直接产生非冗余的边界框预测无需NMS。这种端到端设计不仅降低了推理复杂度还消除了对手动调优阈值的依赖从而简化了集成到生产系统的过程。对比基准测试表明YOLO26实现了比YOLOv11和YOLOv12更快的推理速度其中nano模型在CPU上的推理时间减少了高达43%。这使得YOLO26对于移动设备、无人机和嵌入式机器人平台特别有利在这些平台上毫秒级的延迟可能产生重大的操作影响。源码位置ultralytics/utils/nms.py1.2.3 创新点3ProgLoss和STAL增强训练稳定性和小目标检测训练稳定性和小目标识别仍然是目标检测中持续存在的挑战。YOLO26通过整合两种新颖策略来解决这些问题渐进损失平衡ProgLoss和小目标感知标签分配STAL如图图3c所示。ProgLoss在训练期间动态调整不同损失分量的权重确保模型不会过拟合于主导物体类别同时防止在稀有或小类别上表现不佳。这种渐进式再平衡改善了泛化能力并防止了训练后期的不稳定。另一方面STAL明确优先为小目标分配标签由于像素表示有限且易被遮挡小目标尤其难以检测。ProgLoss和STAL共同为YOLO26在包含小目标或被遮挡目标的数据集如COCO和无人机图像基准上带来了显著的精度提升。1.2.4 创新点4用于稳定收敛的MuSGD优化器YOLO26的最后一项创新是引入了MuSGD优化器图3d它结合了随机梯度下降SGD的优势与最近提出的Muon优化器一种受大型语言模型训练中使用的优化策略启发而发展的技术。MuSGD利用SGD的鲁棒性和泛化能力同时融入了来自Muon的自适应特性能够在不同数据集上实现更快的收敛和更稳定的优化。源码位置ultralytics/optim/muon.py2.如何训练YOLO26模型2.1 如何训练NEU-DET数据集2.1.1 数据集介绍直接搬运YOLO11的就能使用2.1.2 超参数修改位置如下default.yaml2.2 训练可视化训练方式import warnings warnings.filterwarnings(ignore) from ultralytics import YOLO if __name__ __main__: model YOLO(ultralytics/cfg/models/26/yolo26n.yaml) #model.load(yolo26n.pt) # loading pretrain weights model.train(datadata/NEU-DET.yaml, cacheFalse, imgsz640, epochs300, batch16, close_mosaic10, workers2, device0, #optimizerSGD, # using SGD,auto projectruns/train, nameexp, )训练结果可视化结果YOLO26n summary (fused): 122 layers, 2,376,006 parameters, 0 gradients, 5.2 GFLOPs Class Images Instances Box(P R mAP50 mAP50-95): 100% ━━━━━━━━━━━━ 16/16 3.0it/s 5.4s all 486 1069 0.745 0.643 0.722 0.407 crazing 69 149 0.615 0.215 0.367 0.139 inclusion 87 222 0.784 0.725 0.796 0.396 patches 92 243 0.834 0.848 0.918 0.605 pitted_surface 93 130 0.823 0.716 0.788 0.499 rolled-in_scale 81 171 0.643 0.538 0.615 0.29 scratches 90 154 0.77 0.818 0.85 0.51预测结果3DEGConv结合YOLO26的C3k2模块3.1原理介绍论文MixerCSeg: An Efficient Mixer Architecture for Crack Segmentation via Decoupled Mamba Attention摘要特征编码器通过塑造细粒度纹理和薄结构的表示在像素级裂缝分割中扮演着关键角色。现有的基于CNN、Transformer和Mamba的模型各自仅能捕获所需空间或结构信息的一部分在建模复杂裂缝模式方面存在明显不足。为解决此问题我们提出了MixerCSeg一种混合架构其设计如同一个协同配合的专家团队其中类CNN路径专注于局部纹理类Transformer路径捕获全局依赖而类Mamba流则在单一编码器内建模序列上下文。MixerCSeg的核心是TransMixer它探索Mamba的潜在注意力行为同时建立能够自然表达局部性和全局感知的专用路径。为了进一步增强结构保真度我们引入了一种空间块处理策略和一种方向引导边缘门控卷积该卷积能在不显著增加计算开销的情况下增强对不规则裂缝几何形状的边缘敏感性。随后采用空间细化多级融合模块在不增加复杂度的情况下细化多尺度细节。在多个裂缝分割基准上的大量实验表明MixerCSeg仅以2.05 GFLOPs和2.54 M参数量就实现了最先进的性能展现了其高效性和强大的表征能力。图2展示了我们提出的MixerCSeg模型该模型由三个核心组件构成TransMixer模块、DEGConv模块和SRF模块。其中TransMixer模块旨在提取像素级裂缝特征DEGConv模块用于捕捉裂缝的纹理与拓扑线索而SRF模块则实现高效的多级特征融合。具体而言对于输入图像P ∈ R^{3×H×W}首先通过主干层将其投影为视觉特征并经由TransMixer模块处理以获取多尺度特征图{F1, F2, F3, F4}。随后这些特征被送入DEGConv模块该模块应用空间块处理策略将方向先验嵌入引入特征图从而增强模型对形态各异的裂缝的纹理特征与语义特征的感知能力。最后SRF模块对多尺度特征图进行融合分割头输出像素级裂缝分割结果r ∈ R^{1×H×W}。3.2 方向引导边缘门控卷积与被动处理信息的普通卷积相比门控卷积能够动态调节信息流从而更有效地保留重要特征。在实际场景中裂缝常常向多个方向延伸出分支这对模型精确追踪这些交叉重叠的路径构成了显著挑战。为解决此问题我们设计了一个方向引导边缘门控卷积模块。该模块融合了多视角处理策略与方向先验以精确建模复杂的裂缝结构其处理流程如图2(b)所示。重排。对于第i层的特征图 F_i ∈ R^{C_i × H_i × W_i}我们将其划分为 N 个不重叠、大小为 h_i × w_i 的视图记为 F_i {F_i^1, F_i^2, ..., F_i^N}其中 N (H_i / h_i) × (W_i / w_i)。F_i^j ∈ R^{C_i × h_i × w_i} 表示第 j 个局部视图的特征图。方向嵌入生成。我们首先将输入的 F_i^j 沿通道维度进行平均得到 ˜F_i^j ∈ R^{1×h_i×w_i}。随后使用 Sobel 算子计算该视图的水平梯度 d_x 和垂直梯度 d_y。然后通过反正切函数 θ arctan(d_y / d_x) ∈ R^{1×h_i×w_i} 计算每个像素的弧度值并将结果约束在区间 [0, π] 内。为了获得更紧凑的特征表示并减少单个异常像素的干扰我们进一步将视图划分为大小为 (cell_h, cell_w) 的单元格并将弧度区间 [0, π] 均匀划分为 n 个区间。对于每个单元格 C_{a,b}我们计算每个像素的弧度方向所对应的区间索引统计每个区间内的像素数量并使用该区间的中心弧度值进行加权从而得到该单元格的定向直方图特征。该过程可表示为其中θ(u,v) ∈ [0,π] 表示位置 (u,v) 处的方向弧度值n 是区间数量k 0, ..., n-1 是区间索引。I[·] 是指示函数。c_k π/(2n) k·(π/n) 是第 k 个区间的中心弧度值|C_{a,b}| cell_h × cell_w 是单元格中的总像素数。最后我们聚合所有单元格的特征得到空间方向先验向量 p ∈ R^{n_{bins} × (h_i/cell_h) × (w_i/cell_w)}然后将其转换为一个一维的方向嵌入向量这里avgpool 表示自适应平均池化操作ϵ 是最终得到的方向嵌入向量。边缘卷积。为了增强模型对裂缝纹理特征的感知我们设计了一个轻量级的边缘卷积。首先采用逐点卷积将特征映射到低维空间从而降低计算复杂度。随后使用核大小为 1×k 和 k×1 的条带卷积分别提取裂缝在水平和垂直方向上的方向特征。最后将两个方向的特征沿通道维度拼接并使用深度卷积得到输出结果。门控机制。如图 2(b) 所示我们首先将方向嵌入特征与原始特征图相加使用 EdgeConv 和 sigmoid 函数生成门控权重同时将 EdgeConv 应用于原始特征然后通过逐元素相乘将它们组合起来最后将来自不同空间块的独立特征进行重排以恢复图像原有的空间结构。为了进一步减轻重排可能引入的边界不对齐问题我们引入一个额外的 EdgeConv 层进行后处理最终得到优化后的特征表示 F_i。3.2 yolo26-C3k2_DEGConv结构框图源码详见https://cv2023.blog.csdn.net/article/details/1594633163.3训练结果可视化结果原始mAP50原始为 0.722提升至 0.732 R 原始为 0.643 提升至 0.682 mAP50-95原始为0.407提升至0.413YOLO26-C3k2_DEGConv summary: 616 layers, 2,450,622 parameters, 0 gradients, 6.5 GFLOPs Class Images Instances Box(P R mAP50 mAP50-95): 100% ━━━━━━━━━━━━ 16/16 2.0it/s 7.9s all 486 1069 0.707 0.682 0.732 0.413 crazing 69 149 0.496 0.329 0.388 0.137 inclusion 87 222 0.707 0.729 0.773 0.412 patches 92 243 0.811 0.872 0.916 0.591 pitted_surface 93 130 0.842 0.746 0.821 0.514 rolled-in_scale 81 171 0.654 0.586 0.654 0.301 scratches 90 154 0.734 0.831 0.837 0.523

更多文章