测试时batchsize大小影响结果

最新推荐文章于 2023-07-26 14:32:07 发布
最新推荐文章于 2023-07-26 14:32:07 发布
阅读量2.9k 收藏 2
点赞数 1
分类专栏： 其他
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_33619359/article/details/115540096
版权

今天训练一个小模型，发现训练时候batchsize设为16，训练过程中test出结果是100%；但是加载模型测试的时候，结果就不对了。。。尤其是batchsize设为2/4/8的时候。后来发现是自己蠢啊

漏了一句

model.eval()
qq_1925620345
关注
  • 1
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【目标检测】epoch、batch、batch_size理解
01-20
1 epoch 当一个完整的数据集通过神经网络一次并且返回一次的过程称为一个epoch。 然而，当一个epoch对于计算机太过庞大时，就需要把它分成多个小块。 2 batch 在不能将数据一次性通过神经网络的适合，就需要将数据集分成几个batch。 3 batch_size 直观的理解 一个batch中的样本总数（一次训练所选取的样本数）。 batch_size的大小影响模型的优化程度和速度。同时其直接影响到GPU内存的使用情况，假如你GPU显存不大，该数值最好设置小一点。 提出batch_size的原因 在没有使用Batch Size之前，这意味着网络在训练时，是一次把所有的数据（整个数据库
csv-file-procesor-spring-batch:这个应用程序确实使用 Spring Batch 处理了一个巨大的 CSV 文件，它可以使用 Maven 进行测试
06-08
csv-file-processor-spring-batch 该应用程序确实使用 Spring Batch 处理了一个巨大的 CSV 文件，它可以使用 Maven 进行构建/测试。 它确实需要传递以下属性/参数： --csv.processor.chunk.size={要处理的块大小} --csv.processor.input.filename={csv 输入文件名，必须在类路径中} --csv.processor.output.filename={csv输出文件名} 提供的资源： sample-data.csv ：具有有效格式的默认示例文件，该文件有 245.000 行 test-expected-data.csv：用于比较单元测试的有效输出 test-input-data.csv：包含 10 行的小样本文件，用作单元测试的输入
pytorch 测试模型时取不同的batchsize会由不同的正确率
lanlin的博客
06-07 1415
pytorch 测试模型时取不同的batchsize会由不同的正确率，一般是没有使用model.eval()的原因
【笔记】测试batch_size 的大小对训练时间的影响: 提速不是成比例的
nyist_yangguang的博客
07-01 1626
train 的batch_size 设置为 160 ， test 的 batch_size设置为100（设置为160会爆显存） 训练集 4000 张， 测试集 1000张 train 的batch_size 设置为 80 ， test 的 batch_size设置为100 训练集 4000张 ， 测试集 1000张 可以看到提速不是成比例的。 ...
YOLOV2 YOLO9000
Yoyo211399的博客
07-24 989
YOLOv2 个人笔记 最后有附上大佬们文章的连接
关于【batch】的一些问题
qq_43308156的博客
05-01 9592
关于【batch】的问题
训练神经网络时batch_size设置大小参考。
热门推荐
TANGerrr的博客
07-07 1万+
前言：在对神经网络进行训练时，大家经常会遇到一个超参数：batch_size 那么，batch_size究竟是什么，又该如何最优的设置这个值呢？ batch_size个人理解：将所训练的样本数量分为多少个为一组。这个值的大小与梯度下降的效率和结果直接相关。 假设训练样本共m个，你设置batch_size为1，则每个样本都是一个batch_size。 你设置batch_size为m，则所有样本组成这一个batch_size。 1与m也是两个极端。 当设置为m时，此时梯度下降称为批量梯度下降法。你可以理解为神经
【深度学习】BatchSize设置
littlemichelle
07-18 1万+
Batch_size的使用意义及大小的选择 Batch_size不宜选的太小，太小了容易不收敛，或者需要经过很大的epoch才能收敛；也没必要选的太大，太大的话首先显存受不了，其次可能会因为迭代次数的减少而造成参数修正变的缓慢。 Batch_size有时候明明已经很小了，可显存还是很紧张，还有就是同样的图片大小，同样的Batch_size，为啥有时候显存够用有时候就不够用呢，目前我所知道...
Tensorflow 中train和test的batchsize不同时, 如何设置: tf.nn.conv2d_transpose
修行之路
07-02 676
大家可能都知道, 在tensorflow中, 如果想实现测试时的batchsize大小随意设置, 那么在训练时, 输入的placeholder的shape应该设置为[None, H, W, C]. 具体代码如下所示: # Placeholders for input data and the targets x_input = tf.placeholder(dtype=tf.float32, shape=[None, input_dim[0],input_dim[1],input_dim[2]], na
YOLOV8学习笔记1
最新发布
xbsigeibwkouvfcj的博客
07-26 366
在此申明，此方法是前期自行摸索，不是常用的运行方式。刚问了厉害的人，才知道我这个方法不太好。主流方法是输入代码训练或者运行train.py训练。此篇博客的方法，也能训练，对我而言，能运行，就说好方法。但是对于之后的算法改进不太好操作，尽量还是改成运行train.py训练。具体操作，还在摸索，有结果了再写。在此之前没有学习和训练过任何深度学习网络，所以一开始无从下手。主要是借鉴了别人的博客：1、本人在之前已经配置好GPU版本的深度学习环境（），但是跟着这个链接运行，不知道为什么还是cpu训练。
leveldb-benchmarks:一堆使用 node.js 使用 leveldb 测试各种事物的基准测试
06-26
设置writeBufferSize选项以匹配批处理中数据的字节大小。 通常大于 16MB 的值没有区别 最好提前写入小批量，而不是等待批处理缓冲区填满然后再写入批处理 索引查询速度 leveldb 中的键按字典顺序排序，您可以直接...
jmeter-kafka-container:用于卡夫卡负载测试的JMeter容器
04-13
JMeter容器，用于Kafka负载... Kafka批次大小（batch.size） 16384 LINGER_MS Kafka Linger（毫秒）（linger.ms） 1个 BUFFER_MEMORY 卡夫卡缓冲存储器（buffer.memory） 33554432 确认 卡夫卡（Kafka）袜子 1个
bitness:确定 Lua 的位数
05-29
在PUC Lua 下，它检查字节码以获取size_t的大小。 在LuaJIT 上，它调用ffi.abi来获取架构。 该模块导出单个函数，调用该函数时将返回 32、64 或在无法确定位数时抛出错误。 它在哪里工作？ 在 x86 和 x64 平台上...
Pytorch 关于Batch_Size的大小及BatchNorm设置对测试结果的影响
danielr1106的博客
02-29 1万+
这篇里面没图片 BatchNorm的affine=True的情况下，如果训练和测试的时候Batch_Size设置成不同的数字，比如训练的时候Batch_Size=16，测试的时候单张测试（Batch_Size=1），则测试结果会很差，必须在测试的时候Batch_Size=16（也就是测试和训练使用同样的Batch_Size），才会有合理的结果 这样的情况是因为BatchNorm的affine=Tr...
选取训练神经网络时的Batch size ，BatchNorm
u013385018的专栏
03-12 1596
结论: batch size 一般为2的幂次方,128为分位线,向下(乘以0.5)或向上(乘以2)测试效果,若向下效果继续,乘以0.5,直指结果不再变好,数值范围一般在:2到512.有论文说最好的实验表现都是在batch size处于2~32之间得到的 一阶优化算法:sgd,adam等,一般Batch size比较小.二阶优化算法:共轭梯度法,L-BFGS等需要二阶导数,太小,对二阶导数误差...
【菜菜的CV进阶之路-Pytorch基础-batch normalization】同一个模型预测结果随batchsize的不同而不同
智慧地球（AI·Earth）
04-17 2712
训练一个网络，在测试结果的时候遇到的问题：我同一个模型，当batchsize设置成1的时候准确率70%，但当batchsize设置成8的时候就是90%，真是百思不得其解...然后问师兄，师兄说可能是一个取了平均，一个没有取平均（当时没太懂TT...），Google后发现了答案QAQ： 请教：对于同一个模型，预测结果随输入样本数量而改变 目前在做一个softmax的分类，非常基础，是分类电视台标...
神经网络训练时如何选取batch size的大小
sinat_28375239的博客
09-07 5720
神经网络训练时如何选取batch size的大小 做实验时batch size选取的128，设置每1000步模型保存一次。但发现训练到后面损失很难降低了。 用batch size=32或64做实验， 训练到后面，可以用较小的batch size，如32 训练到后面，模型保存步数可以小一些。 ...
batch-size较小时还能用batch normalization吗？
weixin_43850171的博客
03-09 940
batch size比较小的时候还用batch normalization吗
python读取.db文件
qq_33619359的博客
04-07 8962
毫无头绪，百度出我想要的东西了，记录一下。 import sqlite3 def dict_factory(cursor, row): d = {} for idx, col in enumerate(cursor.description): d[col[0]] = row[idx] return d con = sqlite3.connect("ChineseCharactersLite.db") #打开数据库 con.row_factory = dict_fa
batch size对训练的影响
05-30
Batch size是指在训练神经网络时一次性输入模型的样本数。Batch size的大小会影响模型训练的速度和...因此，在选择batch size的大小时，需要根据实际情况进行调整，找到一个最佳的batch size大小以达到最佳的模型效果。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值