如何展示训练集、验证集的标签类别及数量信息(含代码)

已于 2023-06-22 23:15:28 修改
阅读量776 收藏 1
点赞数
分类专栏： 工欲善其事 文章标签： 人工智能 机器学习 深度学习
于 2023-06-16 10:23:29 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/plover007x/article/details/131241512
版权

Why？

当我们训练模型时（有监督），对训练集、验证集的数据分布需要有一个大致的概念。

样本空间是否均衡？

训练集和验证集比例是否平衡？

有哪些标签类别？

每类标签数量如何？

采用yolo系列训练时，模型训练完成时，当然会生成一张统计表，但是不够美观和直观。

特别是向leader汇报工作时，我们更希望能够以图表的形式展示出来。

所以，上图的结果，如果能够加上标签分布统计图，就能够起到锦上添花的效果：

How？代码文件附在文末

本文采用jupyter作为简单的展示，代码参考下图：

代码：

https://download.csdn.net/download/plover007x/87915750

plover007x
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
专栏目录
OXford FLowers102 划分好的数据集带代码可以直接训练
06-03
### 牛津花卉数据集介绍及使用 牛津花卉数据集（Oxford Flowers Dataset）是一个用于...`train.txt`, `val.txt`, 和 `test.txt` 文件中分别包含训练、验证和测试集的图像文件名及其对应的类别标签。 #### 使用方法
问题解决：YOLOv3 自动计算各个数据集中每个类别的数量
qionggaobi9328的博客
12-28 2823
YOLOv3 自动计算各个数据集中每个类别的数量 虽然功能实现了，方法也很简单，但算不是最上层的方法。 步骤0： 已知： 进行批量测试的时候，使用./darknet detector valid cfg/voc.data cfg/yolov3-voc.cfg backup/yolov3-voc_final.weights输出文本检测结果后，会在darknet/results文件夹中生成comp4_...
学习经验分享【NO.1】：YOLOv5查看数据集各类别实例数目
m0_70388905的博客
05-16 3515
问题：YOLOv5训练时会产生label.jpg的图片，如下所示。但是看不到具体列别的实例数据，在写论文的时候需要此数据描述数据集。 解决方法：在plot.py中增加打印实例数据的代码，具体代码如下所示 def plot_labels(labels, names=(), save_dir=Path('')): # plot dataset labels LOGGER.info(f"Plotting labels to {save_dir / 'labels.jpg'}... .
YOLOv5入门（二）处理自己数据集（标签统计、数据集划分、数据增强）
最新发布
mw的博客
04-30 2465
上一节中我们讲到如何使用Labelimg工具标注自己的数据集，完成1658张数据集的预处理，接下来将进一步处理这批数据，通常是先划分再做数据增强。
深度学习 — VOC数据集 & 处理工具类
pentiumCM的博客
11-17 4805
深度学习笔记 - VOC数据集
训练集、验证集和测试集的意义
热门推荐
芦金宇的专栏
10-17 2万+
在有监督的机器学习中，经常会说到训练集（train)、验证集（validation）和测试集（test），这三个集合的区分可能会让人糊涂，特别是，有些读者搞不清楚验证集和测试集有什么区别。
统计json、txt中标签数量(使用yolo)
weixin_47453139的博客
09-01 1676
【代码】统计json、txt中标签数量并绘制图表 训练技巧
自训练数据集打标签注意事项及使用工具推荐
阿珂学cv
06-15 1万+
盘点自训练数据集如何打标签！分享我在训练自己的数据集前期所碰到的一些问题，希望大家能及时避雷！
Yolo目标检测深度学习训练代码注释清楚，可自己修改图像路劲，标签路径，训练自己的数据集
03-20
这可能涉及到调整类别数量、锚点大小等参数。 3. 训练脚本：通常，YOLO的训练脚本会包括加载数据集、设置超参数（学习率、批大小等）、初始化模型、训练循环等步骤。确保修改脚本中的图像路径和标签路径，指向你的...
从简单到高复杂度的用python实现yolo训练自己数据集的代码范例集合（含代码说明）.docx
06-06
通常，数据集分为训练集和验证集。 2. **预处理**：在加载数据时，可能需要对图像进行预处理，如调整大小、归一化、随机翻转等，以增加模型的泛化能力。 3. **损失函数**：YOLO 使用多任务损失函数，结合了分类和...
yolov5最新数据集下载80类标签.7z
06-19
3. **模型配置**：在YOLOv5的源代码中，需要配置模型以适应新的类别数量和数据路径。 4. **训练模型**：使用提供的训练集进行模型训练，可能需要调整学习率、批次大小、训练轮数等超参数。 5. **验证与调优**：在...
FewRel1.0数据集和代码压缩包
06-09
FewRel1.0 数据集是针对小样本关系抽取设计的，其特点是训练集、验证集和测试集中的关系类别数量有限。主要包含以下三个文件： 1. `train.csv`：训练数据集，用于模型的训练。每个样本由三部分组成：实体对（head ...
机器学习
pythoncsdn111的博客
08-08 1370
机器学习基本概念 名词解释 样本集：一般就是一个表格数据 ，我们研究数据的集合，每一列就是样本的一条属性，每一行就是一个数据样本 样本标签：我们要研究的数据指标， 可能是数据的一条属性 训练集：从样本集中，拆分出来的一部分样本，样本个数多 8：2 9：1 7：3，用来训练算法模型的数据集合 测试集：从样本集中，拆分出来的一部分样本，样本个数少 8：2 9：1 7：3，用...
利用已有的标签文件生成训练集和验证集（YOLO）
ungoing的博客
04-20 903
1. 如果标签文件是xml格式（即VOC格式） 可以利用以下程序直接进行转换，生成的标签文件是txt格式（即YOLO格式）：（注意xml中的编码格式应该是utf-8） import xml.etree.ElementTree as ET import pickle import os from os import listdir, getcwd from os.path import join import random from shutil import copyfile classes = [
【深度学习】快速制作图像标签数据集以及训练
qq_44653420的博客
11-02 2322
【深度学习】快速制作图像标签数据集以及训练
机器学习中的标签是什么？
gu1857035894的博客
03-10 8952
在机器学习中，标签（label）是指一个实例的正确输出或类别，也可以称为目标变量（target variable）或响应变量（response variable）。通常情况下，数据集包含两部分：特征和标签。特征是用于描述实例的属性或特征，而标签则是用于训练和评估机器学习模型的目标变量。例如，在图像分类问题中，特征可能是像素值或特征描述符，标签则是图像的类别，如猫、狗或鸟等。
统计yolo 测试集标签中，共有目标个数
caojinpei123的博客
12-07 1735
import numpy as np data = [] count = 0 for line in open("H:/dataSet/data/text_all.txt", "r"): # 设置文件对象并读取每一行文件，测试集路径 data.append(line) #print(data) #f3 = open('E:\CODE\TX\dir.txt','r') for a i...
机器学习数据集----训练集、测试集以及验证集
weixin_58222015的博客
02-12 1万+
其中，Ytrain为正确的标签，y_score为输出概率值，thresholds1为阈值，当 y_score>thresholds1时预测为正样本；随机将样本划分为训练集（70%）和测试集（30%），用训练集训练模型，用测试集验证模型及参数。接着再把样本打乱，重新选择训练集和测试集，继续训练模型和验证模型。将样本随机划分为K个大小相同的互斥的子集，每次选K-1个作为训练集，剩的那个作为测试集。，可以考虑划分为训练集（60%）、验证集（20%）、测试集（20%）；，验证集和测试集都留1W即可；
验证集和测试集的区别_机器学习模型数据集划分问题（交叉验证）
weixin_39598568的博客
11-24 2128
本次的话题是有关在机器学习模型构建中数据集划分问题。在机器学习建模中，通常需要将数据集划分为两部分，训练集、测试集。训练集是已经有标签的数据，测试集是无标签的数据。有标签的数据与无标签的数据相互独立。由于在模型训练过程中经常出现过拟合的情况，也就是说模型在训练过程中表现良好，但是在实际测试环节却不如训练效果。这时，人们将训练集一分为二，将其再次划分为训练集和验证集，目的是在实际进行测试之...
yolov5yolov3训练自己的数据集超详细
01-23
例如，修改`train`和`val`字段来指定数据集的路径，`nc`字段设置类别数量，`batch_size`和`img_size`则根据硬件资源和需求调整。 六、训练 配置完成后，使用`train.py`脚本来启动训练。命令行中输入相应的参数，如...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

plover007x

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值