tf:failed to alloc 268435456 bytes on host: CUDA_ERROR_OUT_OF_MEMORY

最新推荐文章于 2024-08-11 12:14:06 发布
最新推荐文章于 2024-08-11 12:14:06 发布
阅读量2.3k 收藏
点赞数
分类专栏： tf
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_26669719/article/details/88597682
版权

tensorflow/core/framework/allocator.cc:101] Allocation of X exceeds 10% of system memory. 或者 tensorflow.python.framework.errors_impl.InternalError: Dst tensor is not initialized 解决办法：

参考链接：https://github.com/tensorflow/tensorflow/issues/18736#issuecomment-396012638

  1. 模型太大，如太大的全连接层
  2. 检查数据类型，用float32代替float64
  3. 减小batch_size
  4. 更改优化器，adam/RMSprop优化器会存储历史梯度， 从而double内存消耗
  5. 安装时尝试采用‘conda install tensorflow(-gpu)’而非’pip install tf’
qq_26669719
关注
专栏目录
TX2之failed to alloc 2304 bytes on host解决方法
ZONGXP的博客
01-23 2148
参考：https://devtalk.nvidia.com/default/topic/1029742/jetson-tx2/tensorflow-1-6-not-working-with-jetpack-3-2/ 在服务器上训练得到tensorflow模型，然后往TX2上部署推理的时候，报了如下的错 W ./tensorflow/core/common_runtime/gpu/pool_a...
Allowed memory size of 268435456 bytes exhausted 问题处理
a26637896的博客
09-21 2万+
我之前按照网上的方式设置了php.ini memory_limit或者直接ini_set(”memory_limit”,”256M”)，发现这根本治标不治本，现在256M也=满足不了了，这样下去数据只会越加越大。 然后查看了出问题的代码，说真的这个想要治本，还是得根据自己代码的情况来看。 我这边的问题是设置了一个静态变量，这个静态变量在构造函数查询了一个数据表的所有数据，长此以往，造成了内存...
tensorflow CUDA out of memory
热门推荐
无奈的小心酸的博客
05-27 4万+
今天刚把服务器搭建起来 结果程序就跑不起来 当时差点把自己吓尿了 错误类型：CUDA_ERROE_OUT_OF_MEMORY E tensorflow/stream_executor/cuda/cuda_driver.cc:924] failed to alloc 17179869184 bytes on host: CUDA_ERROR_OUT_OF_MEMORY W ./tenso...
解决AI模型训练中的CUDA out of memory问题
最新发布
猫头虎
08-11 433
今天猫头虎带您深入探讨如何解决AI训练中的常见问题之一：。在这篇博客中，我们不仅会详细分析这个问题的原因，还会提供有效的解决方案，帮助您顺利完成AI模型的训练。大家好，我是 猫头虎，别名猫头虎博主，擅长的技术领域包括云原生、前端、后端、运维和AI。我的博客主要分享技术教程、bug解决思路、开发工具教程、前沿科技资讯、产品评测图文、产品使用体验图文、产品优点推广文稿、产品横测对比文稿，以及线下技术沙龙活动参会体验文稿。内容涵盖云服务产品评测、AI产品横测对比、开发板性能测试和技术报告评测等。目前，我活跃在CS
海思35xx 编程报错 mmz_userdev:ioctl_mmb_alloc: hil_mmb_alloc(, 0, 0x0, 0, ) failed!
yijiangyi的博客
02-23 748
海思3516 用ive写图像处理代码时报错。这个时内存申请错误，具体如下 mmz_userdev:ioctl_mmb_alloc: hil_mmb_alloc(, 0, 0x0, 0, ) failed! [Func]:hi_mpi_sys_mmz_alloc [Line]:866 [Info]:system alloc mmz memory failed! 报错信息说的很明白了，这是一个内存申请时的报错。从第一行可以看出，申请大小为0的内存失败。 定位到申请内存错误的位置，修改掉错误的代码即可， ...
java进程老挂掉_JAVA进程突然挂掉 - 1024菜bird的个人空间 - OSCHINA - 中文开源技术交流社区...
weixin_35395422的博客
02-23 1025
JVM内存不足导致进程死掉. Native memory allocation (mmap) failed to map一台服务器上部署很多JAVA进程已经是微服务的常态，但也有些坑。背景，测试服务器上的一些JAVA进程突然挂掉，查看call back的日志发现如下：# There is insufficient memory for the Java Runtime Environment to...
关于TensorFlow 中使用sess导致内存不足
weixin_42707527的博客
03-16 641
想要将tf.tensor转换为numpy格式，网上介绍的无非就是两种方法，一种是直接xxx.numpy()，结果报错，按照网上说的修改方法也不行；另一种方法就是使用session，然后xxxxx.eval(session=sess)，结果会导致内存直接爆炸，16g的内存装满，显示的warning为 2021-03-16 00:22:36.412770: W tensorflow/core/framework/cpu_allocator_impl.cc:80] Allocation of 4759040000
[解决]GPU显存未释放问题
千羽的计算机视觉与机器人
03-14 2155
https://www.jianshu.com/p/0d8ea6ca332a
【A卡，Windows】stable diffusion webui下载安装避坑指南
kokool的博客
05-26 4784
本文内容都是本人亲身经历的，一个一个安装下载测试所感，当然如果你更想用傻瓜式集成包的，那还是跳过这篇文章吧。N卡的可以参考这篇文章，不然后续要拿时间去弥补之前所犯的错误。
Keras/TensorFlow报错CUDA_ERROR_OUT_OF_MEMORY:
Kyrielong的博客
03-07 6219
用keras的model.predict时报错如下： failed to allocate 4.00G (4294967296 bytes) from device: CUDA_ERROR_OUT_OF_MEMORY: out of memory 2019-03-07 10:24:00.610883: E tensorflow/stream_executor/cuda/cuda_driver.c...
正确解决std::bad_alloc异常的有效解决方法
wbajsjhhhhh的博客
05-11 8019
正确解决std::bad_alloc异常的有效解决方法
TensorFlow—GPU版本运行报错：failed to create cublas handle: CUBLAS_STATUS_ALLOC_FAILED
锅盖小郭哥
02-23 2999
报错： 2021-02-23 00:00:47.646531: E tensorflow/stream_executor/cuda/cuda_blas.cc:238] failed to create cublas handle: CUBLAS_STATUS_ALLOC_FAILED 原因： 此时说明你电脑显存占用过高，已经不足！! 如果继续 全负载跑比较复杂的TensorFlow网络模型则会导致电脑其他软件运行失败，起到保护电脑的作用。 解决： 需要在初始化 Session 的时候为其分配固定数量
卷积神经网络识别cifar10
lianggege88的博客
10-08 1577
使用卷积神经网络（tensorflow）识别cifar10数据集
python吃显卡还是内存不足_本地tensorflow在GPU内存不足的情况下运行
weixin_36160969的博客
02-20 861
我试图使用Tensorflow进入深度学习领域，但是在用GPU运行它之后，我在运行一个基本的object detector app时遇到了一个错误。在错误是一个CUDA_error_OUT_OF_MEMORY说它不能分配3.9GB的内存，而我实际上有16GB。实际上，当我只使用一个worker时，错误就解决了，但我相信它没有使用总内存。在抱歉，我的无知，但当你运行与GPU的Tensorflow它是...
RuntimeError错误的几个可能原因记录和解决方法
qq_40600539的博客
01-15 2万+
在训练时，常遇到RuntimeError错误，提示Memory或者RAM不足，甚至受到buy an new RAM的嘲笑！记录一下所遭遇的报错的原因和解决办法，希望对大家有所帮助，也欢迎大家在评论区补充和纠正。 【Q】DataLoader 函数num_workers 设置过大，线程过多，过多占用Cpu，导致报错memory不足。 【A】改小num_workers 即可， 参考值4 ，8 ...
如何处理GPU训练显存不足[memory isn&apos；t enough][alloc failed][out of memory]
Kenji_Shinji的博客
09-13 3525
输出tensor里会挂接device上的地址，方便print时同步device数据输出，在tensor析构的时候会释放device地址，因此如果每次step训练都把输出tensor保存起来的话，导致tensor不会析构，随着训练step的增加则会OOM。前面步骤确认都没有问题的话，则有可能是算子实现bug，这块需要对算子实现有一定的基础了解，可以排查下是否有新增算子，算子里是否有申请显存的操作导致显存泄漏。申请内存，导致随着训练step增加出现OOM，可以搜索代码查看算子的Launch中是否有调用。
python常见错误：显卡内存不够
hm_uin的博客
10-24 1686
显卡内存不足时该怎么办
解决tensorflow运行显存不够的问题
Yokia
06-23 1万+
在训练模型的过程中遇到程序报错，结果发现时因为电脑显存不够，资源都已经分配完了。根据多方查阅，找到了此问题的解决方法，在这里记录和分享一下~ 出现问题 错误：Error message: OOM when allocating tensor with shape[8,64,256,256] and type float on /job:localhost/replica:0/task:0/de...
TSNE报错MemoryError: std::bad_alloc怎么办
06-02
这个错误通常是由于内存不足导致的。有一些方法可以尝试解决这个问题： 1. 减少数据集大小：可以尝试减少数据集的大小，比如只使用数据集的一部分，或者使用降维方法来减少数据集的维度。 2. 增加内存：如果你的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值