• 基于Yolov8的中国交通标志(CCTSDB)识别检测系统


    目录

    1.Yolov8介绍

    2.纸箱破损数据集介绍

    2.1数据集划分

    2.2 通过voc_label.py得到适合yolov8训练需要的

    2.3生成内容如下

    3.训练结果分析


    1.Yolov8介绍

             Ultralytics YOLOv8是Ultralytics公司开发的YOLO目标检测和图像分割模型的最新版本。YOLOv8是一种尖端的、最先进的(SOTA)模型,它建立在先前YOLO成功基础上,并引入了新功能和改进,以进一步提升性能和灵活性。它可以在大型数据集上进行训练,并且能够在各种硬件平台上运行,从CPU到GPU。

    具体改进如下:

    1. Backbone:使用的依旧是CSP的思想,不过YOLOv5中的C3模块被替换成了C2f模块,实现了进一步的轻量化,同时YOLOv8依旧使用了YOLOv5等架构中使用的SPPF模块;

    2. PAN-FPN:毫无疑问YOLOv8依旧使用了PAN的思想,不过通过对比YOLOv5与YOLOv8的结构图可以看到,YOLOv8将YOLOv5中PAN-FPN上采样阶段中的卷积结构删除了,同时也将C3模块替换为了C2f模块;

    3. Decoupled-Head:是不是嗅到了不一样的味道?是的,YOLOv8走向了Decoupled-Head;

    4. Anchor-Free:YOLOv8抛弃了以往的Anchor-Base,使用了Anchor-Free的思想;

    5. 损失函数:YOLOv8使用VFL Loss作为分类损失,使用DFL Loss+CIOU Loss作为分类损失;

    6. 样本匹配:YOLOv8抛弃了以往的IOU匹配或者单边比例的分配方式,而是使用了Task-Aligned Assigner匹配方式

    框架图提供见链接:Brief summary of YOLOv8 model structure · Issue #189 · ultralytics/ultralytics · GitHub

    2.中国交通标志(CCTSDB)数据集介绍

    道路破损数据集大小13829,类别一类:warning、prohibitory、mandatory,按照8:1:1进行数据集随机生成。

    2.1数据集划分

    通过split_train_val.py得到trainval.txt、val.txt、test.txt  

    1. # coding:utf-8
    2. import os
    3. import random
    4. import argparse
    5. parser = argparse.ArgumentParser()
    6. #xml文件的地址,根据自己的数据进行修改 xml一般存放在Annotations下
    7. parser.add_argument('--xml_path', default='Annotations', type=str, help='input xml label path')
    8. #数据集的划分,地址选择自己数据下的ImageSets/Main
    9. parser.add_argument('--txt_path', default='ImageSets/Main', type=str, help='output txt label path')
    10. opt = parser.parse_args()
    11. trainval_percent = 0.9
    12. train_percent = 0.8
    13. xmlfilepath = opt.xml_path
    14. txtsavepath = opt.txt_path
    15. total_xml = os.listdir(xmlfilepath)
    16. if not os.path.exists(txtsavepath):
    17. os.makedirs(txtsavepath)
    18. num = len(total_xml)
    19. list_index = range(num)
    20. tv = int(num * trainval_percent)
    21. tr = int(tv * train_percent)
    22. trainval = random.sample(list_index, tv)
    23. train = random.sample(trainval, tr)
    24. file_trainval = open(txtsavepath + '/trainval.txt', 'w')
    25. file_test = open(txtsavepath + '/test.txt', 'w')
    26. file_train = open(txtsavepath + '/train.txt', 'w')
    27. file_val = open(txtsavepath + '/val.txt', 'w')
    28. for i in list_index:
    29. name = total_xml[i][:-4] + '\n'
    30. if i in trainval:
    31. file_trainval.write(name)
    32. if i in train:
    33. file_train.write(name)
    34. else:
    35. file_val.write(name)
    36. else:
    37. file_test.write(name)
    38. file_trainval.close()
    39. file_train.close()
    40. file_val.close()
    41. file_test.close()

    2.2 通过voc_label.py得到适合yolov8训练需要的

    1. # -*- coding: utf-8 -*-
    2. import xml.etree.ElementTree as ET
    3. import os
    4. from os import getcwd
    5. sets = ['train', 'val']
    6. classes = ["warning","prohibitory","mandatory"] # 改成自己的类别
    7. abs_path = os.getcwd()
    8. print(abs_path)
    9. def convert(size, box):
    10. dw = 1. / (size[0])
    11. dh = 1. / (size[1])
    12. x = (box[0] + box[1]) / 2.0 - 1
    13. y = (box[2] + box[3]) / 2.0 - 1
    14. w = box[1] - box[0]
    15. h = box[3] - box[2]
    16. x = x * dw
    17. w = w * dw
    18. y = y * dh
    19. h = h * dh
    20. return x, y, w, h
    21. def convert_annotation(image_id):
    22. in_file = open('Annotations/%s.xml' % (image_id), encoding='UTF-8')
    23. out_file = open('labels/%s.txt' % (image_id), 'w')
    24. tree = ET.parse(in_file)
    25. root = tree.getroot()
    26. size = root.find('size')
    27. w = int(size.find('width').text)
    28. h = int(size.find('height').text)
    29. for obj in root.iter('object'):
    30. difficult = obj.find('difficult').text
    31. #difficult = obj.find('Difficult').text
    32. cls = obj.find('name').text
    33. if cls not in classes or int(difficult) == 1:
    34. continue
    35. cls_id = classes.index(cls)
    36. xmlbox = obj.find('bndbox')
    37. b = (float(xmlbox.find('xmin').text), float(xmlbox.find('xmax').text), float(xmlbox.find('ymin').text),
    38. float(xmlbox.find('ymax').text))
    39. b1, b2, b3, b4 = b
    40. # 标注越界修正
    41. if b2 > w:
    42. b2 = w
    43. if b4 > h:
    44. b4 = h
    45. b = (b1, b2, b3, b4)
    46. bb = convert((w, h), b)
    47. out_file.write(str(cls_id) + " " + " ".join([str(a) for a in bb]) + '\n')
    48. wd = getcwd()
    49. for image_set in sets:
    50. if not os.path.exists('labels/'):
    51. os.makedirs('labels/')
    52. image_ids = open('ImageSets/Main/%s.txt' % (image_set)).read().strip().split()
    53. list_file = open('%s.txt' % (image_set), 'w')
    54. for image_id in image_ids:
    55. list_file.write(abs_path + '/images/%s.jpg\n' % (image_id))
    56. convert_annotation(image_id)
    57. list_file.close()

    2.3生成内容如下

     

    3.训练结果分析

    confusion_matrix.png :列代表预测的类别,行代表实际的类别。其对角线上的值表示预测正确的数量比例,非对角线元素则是预测错误的部分。混淆矩阵的对角线值越高越好,这表明许多预测是正确的。

     上图是道路破损检测训练,有图可以看出 ,分别是破损和background FP。该图在每列上进行归一化处理。则可以看出破损检测预测正确的概率为91%。

    F1_curve.png:F1分数与置信度(x轴)之间的关系。F1分数是分类的一个衡量标准,是精确率和召回率的调和平均函数,介于0,1之间。越大越好。

    TP:真实为真,预测为真;

    FN:真实为真,预测为假;

    FP:真实为假,预测为真;

    TN:真实为假,预测为假;

    精确率(precision)=TP/(TP+FP)

    召回率(Recall)=TP/(TP+FN)

    F1=2*(精确率*召回率)/(精确率+召回率)

     labels_correlogram.jpg :显示数据的每个轴与其他轴之间的对比。图像中的标签位于 xywh 空间。

     labels.jpg :

    (1,1)表示每个类别的数据量

    (1,2)真实标注的 bounding_box

    (2,1) 真实标注的中心点坐标

    (2,2)真实标注的矩阵宽高

     P_curve.png:表示准确率与置信度的关系图线,横坐标置信度。由下图可以看出置信度越高,准确率越高。

     PR_curve.png :PR曲线中的P代表的是precision(精准率)R代表的是recall(召回率),其代表的是精准率与召回率的关系。

     R_curve.png :召回率与置信度之间关系

     预测结果:

  • 相关阅读:
    AUTOSAR从入门到精通番外篇(十)-嵌入式S19文件解析
    如何通过拍照识别植物?试试这几个软件
    大模型扫盲之小白入门手记
    美团携手HarmonyOS SDK,开启便捷生活新篇章
    NDK (ndk)报错 Unity requires NDK r19 (64-bit)(19.0.05232133)
    点云从入门到精通技术详解100篇-基于多尺度深度特征分析的点云模型法向估计(续)
    大数据库题目集——判断题
    类和对象收尾
    OAuth2
    ABAQUS 求解应力强度因子
  • 原文地址:https://blog.csdn.net/m0_63774211/article/details/132783108