【caffe】ubuntu系统下caffe的create_imagenet.sh（用于生成lmdb文件）与train_caffe.sh(训练指令)详解

1.create_imagenet.sh

create_imagenet.sh是ubuntu下caffe用来将图片数据转换成lmdb格式文件的指令。

下面是create_imagenet.sh中的具体内容，其中本文此处设置的路径为windows下，在ubuntu下改成ubuntu对应的路径即可。

#!/usr/bin/env sh
# Create the imagenet lmdb inputs
# N.B. set the path to the imagenet train + val data dirs
set -e

#备注：此处的路径是windows路径，弄清楚各参数的含义，将相关路径改成ubuntu系统对应的路径即可
EXAMPLE=G:/caffe-master/examples/mobileNet   #网络模型的文件夹的路径
DATA=G:/caffe-master/data/character          #存放图片样本文件夹的路径
TOOLS=G:/caffe-master/Build/x64/Release      #生成lmdb格式所需用到的caffe自带工具的路径（该工具名称convert_imageset.exe）
                                             #在ubuntu系统下，该工具的路径为TOOLS=/home/mgchen/caffe/build/tools

TRAIN_DATA_ROOT=G:/caffe-master/data/character/    #训练样本存放的路径
VAL_DATA_ROOT=G:/caffe-master/data/character/      #测试样本存放的路径

# Set RESIZE=true to resize the images to 256x256. Leave as false if images have
# already been resized using another tool.
RESIZE=false      #是否risize图片的尺寸，true为是，false为否
if $RESIZE; then
  RESIZE_HEIGHT=224
  RESIZE_WIDTH=224
else
  RESIZE_HEIGHT=0
  RESIZE_WIDTH=0
fi

if [ ! -d "$TRAIN_DATA_ROOT" ]; then
  echo "Error: TRAIN_DATA_ROOT is not a path to a directory: $TRAIN_DATA_ROOT"
  echo "Set the TRAIN_DATA_ROOT variable in create_imagenet.sh to the path" \
       "where the ImageNet training data is stored."
  exit 1
fi

if [ ! -d "$VAL_DATA_ROOT" ]; then
  echo "Error: VAL_DATA_ROOT is not a path to a directory: $VAL_DATA_ROOT"
  echo "Set the VAL_DATA_ROOT variable in create_imagenet.sh to the path" \
       "where the ImageNet validation data is stored."
  exit 1
fi

echo "Creating train lmdb..."

GLOG_logtostderr=1 $TOOLS/convert_imageset \
    --resize_height=$RESIZE_HEIGHT \
    --resize_width=$RESIZE_WIDTH \
    --shuffle \
    $TRAIN_DATA_ROOT \
    $DATA/train.txt \
    $EXAMPLE/ilsvrc12_train_lmdb
#上面是执行将训练样本转换成lmdb文件，需要将train.txt文件改成自己的txt文件名称（txt文件需放在对应路径下），最后一行是设置生成lmdb文件后保存的文件夹名称（无需手动创建文件夹）

echo "Creating val lmdb..."

GLOG_logtostderr=1 $TOOLS/convert_imageset \
    --resize_height=$RESIZE_HEIGHT \
    --resize_width=$RESIZE_WIDTH \
    --shuffle \
    $VAL_DATA_ROOT \
    $DATA/val.txt \
    $EXAMPLE/ilsvrc12_val_lmdb
#上面是执行将测试样本转换成lmdb文件，需要将val.txt文件改成自己的txt文件名称（txt文件需放在对应路径下），最后一行是设置生成lmdb文件后保存的文件夹名称（无需手动创建文件夹）

echo "Done."

下面是执行生成lmdb格式指令的图片：

 

2.train_caffenet.sh

train_caffenet.sh是执行训练的指令，文件中的具体内容如下：

由于本人在windows系统下使用git来执行ubuntu中对应的指令，所以里面的路径也是windows下的，导致调用caffe内部工具的路径跟ubuntu下有些不一致。

G:/caffe-master/Build/x64/Release/caffe.exe train \
    --solver=G:/caffe-master/examples/mobileNet/solver.prototxt $@

#第一行是训练模型时所需caffe内部工具caffe.exe的路径
#第二行是指定自己所训练网络模型的solver.prototxt文件的路径

下面给出train_caffenet.sh文件在ubuntu下的对应路径设置：

./build/tools/caffe train \
    --solver=/home/xc/caffe/examples/6class/solver.prototxt $@


#第一行是设置caffe内部工具的路径，路径前缀改成自己电脑caffe的路径（这个路径跟windows下有些不一样）
#第二行是自己需要训练的网络模型的solver.prototxt文件路径。