使用mmsegmentation训练数据集流程

1、环境配置

提前安装好pytorch环境,这里就不再介绍torch如何安装,下面需要安装mmcv相关的库,在终端输入:

pip install -U openmim
mim install mmengine
mim install "mmcv>=2.0.0"

2、数据集准备配置

(1)mmsegmentation支持多种数据集格式,首先需要在根目录下新建一个”data”文件夹,然后把具体的数据集放在data文件夹下,如下格式:

mmsegmentation
├── mmseg
├── tools
├── configs
├── data
│   ├── my_dataset
│   │   ├── ann_dir
│   │   │   ├── train
│   │   │   ├── val
│   │   ├── img_dir
│   │   │   ├── train
│   │   │   ├── val

(2) 其中img_dir下面的train和val文件夹下放的就是训练集和测试集的所有原图数据,ann_dir下面就是标签文件数据

(3)再把自己的数据集拷贝到对应文件夹下面

3、修改配置

(1)在mmseg/datasets目录下找到postdam.py,这是对应于postdam数据集的类文件,直接将其复制一份,新命名为mydataset.py或者其他名字(我这里是ganzhe_dataset.py)

在mydataset.py中修改类名、分类信息、数据集图片后缀、是否忽略0标签这四个地方,由于我的数据集只需要对背景和甘蔗这两个类别进行分割,所以只需要写两个类即可。不同的数据集对应着不同的类,要修改的地方都是大同小异,针对postdam这个数据类会配置以后就可以举一反三。

注意:是否忽略0标签(reduce_zero_label)这个参数,该参数设置为true后,数值为0的标签(通常设置为背景类)不会参与loss计算,由于我的数据集就只有两个类别,所以我默认还是计算背景损失的

(2)将自己新建的ganzhe_dataset.py进行注册,通俗的讲就是修改mmseg/datasets/_init_.py这个文件,只需要将对应的py文件import一下,并在数据集支持列表中添加自己新建的数据集类即可,即新增红色框圈起来的两个位置:

(3)在configs/_base_/datasets文件夹下新建一个数据集配置文件(.py),方法也是先找到postdam.py这个文件直接复制粘贴,然后重命名为ganzhe_dataset.py,并修改相关的配置信息,包括数据集的位置、数据增强方法等信息,这里我主要修改数据集的位置信息,其他参数默认不变,还是那句话,不同的数据集配置文件可能配置信息有差异,但是都是大同小异,学会一个后举一反三。

注意:训练的数据集大小等需修改

4、修改模型配置

(1)configs/_base_/models文件夹下面是mm目前支持的所有模型的结构定义文件,选择一个你打算使用的模型,目前暂时只修改一个地方就行:

SyncBN代表分布式训练,单卡训练将其改成BN,基本上大多数人都是单卡,所以需要修改一下

(2)在configs/twins文件夹下选一个预训练模型的配置文件(.py),作为教程这里也只修改__base__这一个属性,高级的配置修改后续再说。这里只需要修改数据集的配置文件路径即可

5、模型训练

(1)在项目根目录的终端中输入“python tools/train.py 你刚刚修改的预训练模型配置文件”,比如我这里输入的就是

python tools/train.py configs/twins/twins_pcpvt-s_fpn_fpnhead_8xb4-80k_ade20k-512x512.py

回车开始训练,之后会自动下载预训练权重文件到C盘user/.cache文件夹下,等待即可。如果下载实在太慢,可以用浏览器打开下载链接,下好后放进相应的文件夹即可。具体的下载链接和文件夹位置,在控制台都会显示,仔细找找即可。

(2)如果你出现了“xxxDataset is not in the dataset registry”的报错提示,在终端运行下面两行指令:

python setup.py install
pip install -v -e . 

然后重新运行train.py文件开始训练即可。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: mmsegmentation是一个基于PyTorch的开源图像分割工具箱,可以用于训练自己的数据集。以下是训练自己数据集的步骤: 1. 准备数据集:将数据集按照训练集、验证集和测试集划分,并将其转换为mmsegmentation所需的格式。 2. 配置训练参数:在mmsegmentation中,训练参数可以通过配置文件进行设置,包括模型、优化器、学习率、损失函数等。 3. 开始训练使用mmseg的命令行工具开始训练模型,可以通过设置参数来控制训练过程。 4. 评估模型:训练完成后,可以使用mmseg的命令行工具对模型进行评估,包括计算IoU、mIoU等指标。 5. 模型预测:使用训练好的模型对新的图像进行分割预测。 需要注意的是,训练自己的数据集需要一定的计算资源和时间,同时需要对数据集进行充分的预处理和清洗,以提高模型的训练效果。 ### 回答2: mmsegmentation 是一个用于图像分割的深度学习框架,它基于 PyTorch 框架,已经被广泛应用于图像语义分割、实例分割、阴影检测等任务。其所支持的数据类型包括常用的数据集,如 PASCAL VOC、ADE20K、COCO 等。而对于我们自己的数据集,也可以通过一系列步骤来应用于 mmsegmentation 中。 首先,在准备数据时,需要将自己的数据集转化为 mmsegmentation 所支持的数据格式。具体来说,需要将数据集的图片分成训练集、验证集和测试集,同时生成一个 JSON 格式的标注文件,以供训练和测试时使用。同时,还需要对数据进行增强处理,包括大小缩放、翻转、剪裁等等。 其次,在定义模型时,需要根据自己的数据类型选择适合的模型和损失函数。这些模型和损失函数已经在 mmsegmentation 中预定义好了,同时也可以自行定义自己的模型和损失函数。例如,对于常用的图像分割任务,可以使用常见的网络模型,如 UNet、PSPNet 等。 最后,使用 mmsegmentation 进行训练和测试时,需要进行一些参数的配置。主要包括训练参数和测试参数两部分。训练参数包括训练数据集、验证数据集、批量大小、学习率、学习率策略、优化算法等等。测试参数包括测试数据集、模型路径等等。 总体而言,mmsegmentation 是一个非常灵活和易于使用的工具,我们可以使用它来训练和测试自己的数据集。同时,通过不断地调整和优化参数,我们可以得到更加准确的分割结果。 ### 回答3: mmsegmentation是一个基于PyTorch框架的图像分割工具包,可以用来实现各种图像分割算法,如FCN、U-Net、DeepLab、Mask R-CNN等。mmsegmentation提供了训练和测试的代码和模型,也支持自定义数据集训练。 下面我们将重点介绍mmsegmentation训练自己的数据集: 1. 数据集准备 在训练之前,需要准备好一个包含训练、验证和测试图像以及它们的标注的数据集数据集应该按照一定的文件结构进行组织,比如: ``` + dataset + train - image_1.jpg - image_1.png - ... + val - image_1.jpg - image_1.png - ... + test - image_1.jpg - ... ``` 其中,“train”目录包含训练图像和它们的标注,“val”目录包含验证图像和它们的标注,“test”目录包含测试图像。图像文件可以是jpg、png等格式,标注文件可以是png、mat等格式。注意,标注文件应该和图像文件保持对应,且标注像素的取值通常为0、1、2、...、n-1,表示不同的目标类别。 2. 数据集注册 注册自己的数据集需要通过继承mmcv的Dataset类来实现。自定义数据集需要实现少量方法,包括: * \_\_init\_\_:初始化方法,包括定义类别列表、文件列表等。 * \_\_len\_\_:返回数据集中样本数量。 * \_\_getitem\_\_:返回数据集中指定下标的一条数据和标注。 需要注意的是,返回的数据应该按照mmcv的格式进行处理,比如将图像和标注分别转成ndarray格式并归一化后返回。 3. 配置模型 mmsegmentation支持的模型我们可以通过它的配置文件来配置。通过制定不同的配置文件,我们可以配置不同的网络模型、优化器、学习率策略、训练参数等。对于自己的数据集,我们需要在配置文件中指定类别数、输入图像大小等相关参数。 选择具体的网络模型需要根据自己的数据集大小选择。如果数据集较小,我们可以选择较小的模型,否则可以考虑选择较大的模型,如DeepLabV3+、FCN等。 4. 开始训练数据集注册和模型配置完成后,我们可以开始训练自己的数据集。可以通过mmseg中提供的工具进行训练,比如: ``` python tools/train.py ${CONFIG_FILE} ``` 其中,${CONFIG_FILE}是指定的配置文件路径。训练过程中可以通过设置检查点、学习率、优化器等参数来调整模型的训练效果。 5. 验证和测试 训练完成后,我们可以通过mmseg提供的工具进行模型验证和测试,比如: ``` # 验证 python tools/test.py ${CONFIG_FILE} ${CHECKPOINT_FILE} --eval mIoU # 测试 python tools/test.py ${CONFIG_FILE} ${CHECKPOINT_FILE} --out result.pkl ``` 其中,${CHECKPOINT_FILE}是训练过程中保存的模型检查点文件路径,验证和测试的输出结果也会保存在指定路径中。在测试阶段,我们可以查看模型的输出结果,检查预测效果是否符合预期。 以上就是使用mmsegmentation训练自己的数据集的主要步骤,需要注意的是,这只是一个大致的过程,具体操作会根据自己的数据集和需求有所不同。同时也需要在训练过程中多多尝试和调整,来达到更好的训练效果。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值