【YOLOv3】COCO2014数据集的组织方式

在早期的Ultralytics版本的YOLOv3
https://github.com/ultralytics/yolov3/tree/e8c205b4122871710429b2e245dda9d2c40929b4/data
使用的是COCO2014数据集，组织方式同darknet版，在此做记录

下载并配置COCO数据集

MS-COCO 2014, 80 classes,
training 82783, validation 40504

get_coco_dataset.sh中的内容

#!/bin/bash
# CREDIT: https://github.com/pjreddie/darknet/tree/master/scripts/get_coco_dataset.sh

# Clone COCO API
git clone https://github.com/pdollar/coco && cd coco

# Download Images
mkdir images && cd images
wget -c https://pjreddie.com/media/files/train2014.zip
wget -c https://pjreddie.com/media/files/val2014.zip

# Unzip
unzip -q train2014.zip
unzip -q val2014.zip

# (optional) Delete zip files
rm -rf *.zip

cd ..

# Download COCO Metadata
wget -c https://pjreddie.com/media/files/instances_train-val2014.zip
wget -c https://pjreddie.com/media/files/coco/5k.part
wget -c https://pjreddie.com/media/files/coco/trainvalno5k.part
wget -c https://pjreddie.com/media/files/coco/labels.tgz
tar xzf labels.tgz
unzip -q instances_train-val2014.zip

# Set Up Image Lists
paste <(awk "{print \"$PWD\"}" <5k.part) 5k.part | tr -d '\t' > 5k.txt
paste <(awk "{print \"$PWD\"}" <trainvalno5k.part) trainvalno5k.part | tr -d '\t' > trainvalno5k.txt

# get xview training data
# wget -O train_images.tgz 'https://d307kc0mrhucc3.cloudfront.net/train_images.tgz?Expires=1530124049&Signature=JrQoxipmsETvb7eQHCfDFUO-QEHJGAayUv0i-ParmS-1hn7hl9D~bzGuHWG82imEbZSLUARTtm0wOJ7EmYMGmG5PtLKz9H5qi6DjoSUuFc13NQ-~6yUhE~NfPaTnehUdUMCa3On2wl1h1ZtRG~0Jq1P-AJbpe~oQxbyBrs1KccaMa7FK4F4oMM6sMnNgoXx8-3O77kYw~uOpTMFmTaQdHln6EztW0Lx17i57kK3ogbSUpXgaUTqjHCRA1dWIl7PY1ngQnLslkLhZqmKcaL-BvWf0ZGjHxCDQBpnUjIlvMu5NasegkwD9Jjc0ClgTxsttSkmbapVqaVC8peR0pO619Q__&Key-Pair-Id=APKAIKGDJB5C3XUL2DXQ'
# tar -xvzf train_images.tgz
# sudo rm -rf train_images/._*
# lastly convert each .tif to a .bmp for faster loading in cv2

# ./coco/images/train2014/COCO_train2014_000000167126.jpg  # corrupted image

组织结构

用到的linux命令

1. 将压缩文件解压到特定文件夹下
   unzip -d /temp test.zip
   tar zxvf /source/kernel.tgz -C /source/ linux-2.6.29
2. 将dir1下的文件复制到dir2,不包括dir1目录
   cp -r dir1/. dir2
   将dir1及其dir1下所包含的文件复制到dir2下
   cp -r dir1 dir2
3. 统计当前目录下文件的个数（包括子目录）
   ls -lR| grep “^-” | wc -l

参考

1. Linux解压文件到指定目录
2. 快速下载coco数据集
3. Linux下文件或文件夹的复制（拷贝）