blob size exceeds INT_MAX

caffe训练或者测试报错:F0324 13:10:43.535276 16290 blob.cpp:33] Check failed: shape[i] <= 2147483647 / count_ (3000 vs. 2485) blob size exceeds INT_MAX

首先找到错误出处:blob.cpp,在caffe目录下的./src/caffe/blob.cpp

注意上述两个框内的代码,这个错误实际上是caffe对数据大小的一个限制,有时候,INT_MAX是在库文件中定义过的,大小为:2147483647,可以根据两个红框内的代码,判断,shape[i]是否超过了 2147483647 / count_,count_的值会随和for语句逐渐增大为num*channels*height*width;这里的num是每个批次网络读取的数据量,比如你的训练样本为20w,一次性读入,那么这个num就为20w,如果20w分为10个lmdb文件读入,那么一个批次是读取了2w,注意,这里的num,不是batch_size大小!!!channels是样本的通道,一般rgb图像为3通道;height与width即为样本的高宽。

解决方案:

当我们知道出错的原因后,那么解决办法就有以下几种:

1:调小这四个数,channels一般不会改,可以改变图像的高宽,一般由于需求,可能也不会改,那么最后可以调小每次网络读取数据的大小,将训练数据拆分成更多的批次读入

2:将下边的四行注释掉,重新编译caffe,新手不建议

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

HaoRenkk123

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值