Tensorflow training error: LossTensor is inf or nan

最新推荐文章于 2024-03-24 16:41:42 发布
最新推荐文章于 2024-03-24 16:41:42 发布
阅读量847 收藏 1
点赞数
分类专栏： Tensorflow Python 深度学习
本文为Color Space原创，未经允许禁止转载！博客地址：https://blog.csdn.net/stq054188?spm=3001.5343
本文链接：https://blog.csdn.net/stq054188/article/details/94394734
版权
深度学习 同时被 3 个专栏收录
54 篇文章 9 订阅
订阅专栏
Python
45 篇文章 10 订阅
订阅专栏
Tensorflow
28 篇文章 16 订阅
订阅专栏

训练的时候提示错误：LossTensor is inf or nan ，试了下网上有人说是batch_size设置太小了，或者学习率设置太大了，修改后仍无改善，后google查询找到方法：说白了就是你在标注数据的时候矩形框出现了越界等问题，需要检查一下你的xml文件，修正后重新生成record文件再训练即可！

关注【OpenCV与AI深度学习】获得更多学习资讯

扫描下面二维码即可关注

Color Space
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
tensorflow NAN常见原因和解决方法
苏冉旭的专栏
02-14 1万+
最近遇到NAN的问题，花了很久才真正解决。发现网上大部分解决方法都不对或者不彻底，因此单独总结一下。 一、NAN原因 所有NAN都是这个原因：正向计算时节点数值越界，或反向传播时gradient数值越界； 无论正反向，数值越界基本只有两种操作会导致： a) 节点/W/gradient数值逐渐变大直至越界 b) 有除零操作，包括0/0。 二、现象 两者的现象可能一样，绝大多...
TensorFlow出现Found Inf or NaN global norm的排查和解决办法
Pengwill's Blog
05-29 5005
在训练神经网络的时候，由于一些原因会出现NaN或者Inf，致使训练终止。在查阅相关资料之后，并且结合我出现的问题，做了一些总结。出现的代码在TensorFlow 1.12.2版本可正常执行。 出现问题的原因 出现NaN或者Inf的原因一般可分为以下三种 输入数据有错 出现了运算错误，如除数为零，log0等 梯度爆炸 输入数据有错 训练数据可能包含脏数据，在数据清洗时没有清洗干净，导致错误数据输入进模型。首先可以在输入模型前，使用np.any(np.isnan(data))来判断数据是否由nan。若没有，
InvalidArgumentError: LossTensor is inf or nan : Tensor had NaN values
weixin_36670529的博客
11-21 1198
调整tensorflow运行时的迭代次数和学习率
Tensorflow training error: LossTensor is inf or nan(查看数据)
qq_41627642的博客
07-16 173
Tensorflow training error: LossTensor is inf or nan
训练出现：WARNING:root:NaN or Inf found in input tensor.
jinxiqinghuan的博客
11-26 2436
很多博客都说是梯度爆炸的问题，但是我的损失函数正常，不像是出现梯度爆炸的样子。 在https://blog.csdn.net/qq_38284961/article/details/102935800文章的评论里有人说是tensorboaed的问题，可以不用管。 待排查。 ...
PyTorch训练“WARNING:root:NaN or Inf found in input tensor”问题
ya6543的博客
07-05 1万+
PyTorch训练报“WARNING:root:NaN or Inf found in input tensor”警告，可能是tensorboardX使用中数据格式不符合规范。
tensorflow_training:学习张量流
03-08
在本项目"tensorflow_training"中，我们将深入探讨TensorFlow，这是一个强大的开源库，主要用于机器学习和深度学习。TensorFlow由Google Brain团队开发，其核心功能是构建和执行数据流图，这种图描述了数学计算的...
Tensorflow-Cookbook：简单的Tensorflow食谱，易于使用
02-06
如何使用进口ops.py 运作从ops导入* utils.py 图像处理来自utils import *网络模板def network ( x , is_training = True , reuse = False , scope = "network" ): with tf . variable_scope ( scope , reuse = ...
Colab_Tensorflow_Training:这是在Colab中训练Tensorflow对象检测分类器的教程
04-05
Colab_Tensorflow_Training 这是在Colab中训练Tensorflow对象检测分类器的教程 原始教程（ ）适用于使用window os和gpu支持的pc的人。 但是，本教程引用了原始教程的大部分内容，将支持所有操作系统，并且家庭中...
TensorFlow_PracticeNotes:Tensorflow 2.0实践笔记
03-07
**TensorFlow 2.0 实践笔记** 在深入探讨TensorFlow 2.0的实践细节之前，我们首先要理解TensorFlow是什么。TensorFlow是由Google Brain团队开发的一个开源库，主要用于数值计算，尤其在机器学习和深度学习领域应用...
tensorflow_developer:tensorflow开发人员认证研究的所有要求
04-18
- Distributed Training：掌握 TensorFlow 的分布式训练策略，如 Parameter Server 模式和 AllReduce 模式。 8. **部署与推理**： - 导出模型：将训练好的模型转换为可部署的格式（如SavedModel）。 - 部署到...
Faster RCNN pytroch训练问题：Warning: NaN or Inf found in input tensor.
chenyuming的博客
12-18 7997
problem 在自己的数据（voc格式）上训练Faster RCNN（https://github.com/jwyang/faster-rcnn.pytorch）就出现了loss=nan的问题。 在Pascal voc和coco上训练Faster RCNN都正常。 reason 可能是learning rate太大，调小learning rate。最有效的方法是learning rate设为0，看看是不是还有nan的问题。 大概率是自己的数据有问题（我的数据是voc格式），voc获取左边后是要减1的
Faster RCNN pytroch1.0 训练时：Warning: NaN or Inf found in input tensor.
jokerwu192的博客
11-28 3387
文章目录问题原因解决 问题 在Pascal voc和coco上训练Faster RCNN都正常 在训练自己的数据集时（Pascal voc格式）训练Faster R-CNN pytorch1.0时出现Warning: NaN or Inf found in input tensor. 原因 可能是learning rate太大，调小learning rate。最有效的方法是learning rate设为0，看看是不是还有nan的问题。 因为自己的数据是从0开始的，但是源码中-1，如果这时候annota
在训练中出现 NaN or Inf found in input tensor
最新发布
zongmuyang的博客
03-24 1606
在深度学习中，当你看到“NaN or Inf found in input tensor”这样的错误时，它意味着你的输入张量（tensor）中包含了非数字（NaN）或无穷大（Inf）的值。这些值通常是由于数值计算错误或不稳定导致的，并且它们会破坏模型的训练过程，导致预测精度不稳定或者模型完全无法学习。
tensorflow出现LossTensor is inf or nan : Tensor had Inf values
pythonplusvable
09-15 1万+
之前在TensorFlow中实现不同的神经网络，作为新手，发现经常会出现计算的loss中，出现Nan值的情况，总的来说，TensorFlow中出现Nan值的情况有两种，一种是在loss中计算后得到了Nan值，另一种是在更新网络权重等等数据的时候出现了Nan值，本文接下来，首先解决计算loss中得到Nan值的问题，随后介绍更新网络时，出现Nan值的情况。 Loss计算中出现Nan值       ...
训练模型的时候， Warning: NaN or Inf found in input tensor 解决办法
热门推荐
qq_38284961的博客
11-06 2万+
一般出现这句话的时候表示，模型训练过程中出现梯度消失或者梯度爆炸。 更改方式是降低初始学习率，比如加入初始学习率是0.1那么就将它改成0.01。 ...
WARNING:root:NaN or Inf found in input tensor
weixin_45693324的博客
04-10 2285
记录一下出现该问题的原因： 1.数据集问题（我出现的问题，在mask数据集中有部分图片不能使用） 2.学习率太大
“NaN or Inf found in input tensor“问题解决办法
weixin_46573159的博客
01-11 1413
训练模型时，出现NaN or Inf found in input tensor问题。
WARNING:root:NaN or Inf found in input tensor.Test loss: nan,
lanmy_dl的博客
09-07 1848
但是对于我来说是跑过的一样的数据集一样的读取和预处理，另外学习率已经够低了，说学习率调到0 错误消失说明就不是数据集的问题，我这样做了，但是精度一样如上的低，虽然Test loss 有数值了。重点就是net.train()的位置，(很多博客都说放在训练前的，以前epoch训练没问题，换step时粗心没有注意到，这样放的。查问题说是学习率过大或者数据有问题，导致梯度消失或者梯度爆炸，检查数据集或者不断调低学习率。看代码也没问题，结果，果然是很细小的错误，net.train()的用法位置！
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Color Space

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值