Caffe中均值文件的问题

关于均值文件

(1) 在Caffe中作classification时经常需要使用均值文件,但是caffe自己提供的脚本只能将图像数据转换为
binaryproto类似的形式
(2) 我们在使用python接口时需要将npy形式的均值文件导入进来,而非binaryproto这样的均值文件

均值文件形式之间的转换

google类以下发现可以使用如下的代码进行转换:
代码是我自己实际使用的,有注释

import PIL
import Image
import sys
import time
import os
import numpy as np
from matplotlib import pyplot as plt 

start = time.time()

# Make sure that caffe is on the python path
caffe_root = '/home/gavinzhou/caffe-master/'  
sys.path.insert(0, caffe_root + 'python')

import caffe
# "source" is the binary file converted by the command shell 
# "des" is the binary file with python format converted from "source"
source = caffe_root + 'gavinzhou_LAB/alexnet/GF18_mean.binaryproto'
des = caffe_root + 'gavinzhou_LAB/alexnet/GF18_mean.npy'

# BlobProto object
blob = caffe.proto.caffe_pb2.BlobProto()
data = open( source , 'rb' ).read()
# parsing source data
blob.ParseFromString(data)
# convert to npy format
arr = np.array( caffe.io.blobproto_to_array(blob) )
out = arr[0]
# save the converted result
np.save( des , out )

实际测试时,验证数据集使用binaryproto形式的均值文件和测试数据集使用npy形式的均值文件时,正确率基本一样(差异很小但是还是验证集合稍高)

写在后面

从零开始玩deep learning确实很不容易,不过坚持下来就有收获,类似于这种问题虽然很小可是对于入门的learner(比如我)来说,还是要费一番功夫的,特此写出供遇到和我一样问题的人参考,大家共同努力吧!!!

Caffe是一个深度学习框架,其配置文件包含了网络结构、数据输入格式、训练参数等内容。下面是一个简单的配置文件示例: ``` name: "MyNetwork" # 网络名称 layer { name: "input" # 输入层名称 type: "Data" # 层类型 top: "data" # 输出名称 include { phase: TRAIN # 训练阶段 } transform_param { crop_size: 227 # 裁剪大小 mean_value: 104 # 均值 mean_value: 117 mean_value: 123 } data_param { source: "train_lmdb" # 数据源 batch_size: 64 # 批量大小 backend: LMDB # 数据库类型 } } layer { name: "conv1" # 卷积层名称 type: "Convolution" # 层类型 bottom: "data" # 输入名称 top: "conv1" # 输出名称 convolution_param { num_output: 96 # 输出通道数 kernel_size: 11 # 卷积核大小 stride: 4 # 步长 weight_filler { type: "xavier" # 权重初始化方法 } bias_filler { type: "constant" # 偏置初始化方法 value: 0 # 偏置值 } } } ``` 配置文件,每个层都由一个`layer`标签表示,其包含了该层的名称、类型、输入输出名称、参数配置等信息。例如,第一个层为`Data`类型,包含了数据的输入格式、数据源、批量大小等信息。第二个层为`Convolution`类型,包含了卷积核大小、步长、输出通道数、权重初始化方法、偏置初始化方法等信息。 除了网络结构和数据输入格式,配置文件还包含了训练参数,例如学习率、权重衰减、优化器类型等。这些参数可以在`solver`标签进行配置。例如: ``` net: "my_network.prototxt" # 网络配置文件路径 test_iter: 100 # 测试迭代次数 test_interval: 500 # 测试间隔 base_lr: 0.01 # 初始学习率 lr_policy: "step" # 学习率衰减策略 gamma: 0.1 # 学习率衰减因子 stepsize: 100000 # 学习率衰减间隔 momentum: 0.9 # 动量 weight_decay: 0.0005 # 权重衰减 solver_mode: GPU # 训练模式 ``` 以上是Caffe配置文件的简单介绍,实际使用还需要根据具体情况进行配置。
评论 11
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值