class 'tensorflow.python.framework.errors_impl.UnavailableError, OS Error

最新推荐文章于 2022-11-13 22:36:18 发布
最新推荐文章于 2022-11-13 22:36:18 发布
阅读量3.1k 收藏
点赞数
分类专栏： tensorflow 文章标签： tensorflow 分布式 OS Error
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u012133034/article/details/81189246
版权

具体报错如下：

2018-07-24 16:28:43.875720: E tensorflow/core/distributed_runtime/master.cc:269] Master init: Unavailable: OS Error
INFO:tensorflow:Error reported to Coordinator: <class 'tensorflow.python.framework.errors_impl.UnavailableError'>, OS Error

 

该报错是在tensorflow分布式训练下报的，通过查找资料，可能是tensorflow的一个bug，不过解决方法也是有的。

方法一：

在起worker时加上延时，我是在脚本里加了sleep  5秒，我用的这个方法，加了之后，就没报错了；

方法二：

把tf.train.Supervisor 改成tf.train.MonitoredTrainingSession，因为Supervisor 这个在报错后就直接退出，MonitorTrainingSession当初始化失败后，会重新创建一个新的session。

 

具体可以参考以下资料：

https://github.com/Qihoo360/XLearning/issues/23

https://github.com/tensorflow/tensorflow/issues/17852

后厂村葫芦娃
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
解决报错：tensorflow.python.framework.errors_impl.UnknownError: Failed to get convolution algorithm.
个人博客
04-10 2万+
早上在使用tensorflow时报了下面的错： 2019-04-10 10:19:31.648250: I tensorflow/core/platform/cpu_feature_guard.cc:141] Your CPU supports instructions that this TensorFlow binary was not compiled to use: AVX AVX2 20...
tensorflow常见bug总结
BigCherry的博客
04-18 710
tensorflow常见错误汇总 1, ‘utf-8’ codec can’t decode byte 0xff in position 0: invalid start byte 选择一款你喜欢的代码片高亮样式，下面展示同样高亮的 代码片. //当运行下面代码时 image_raw_data = tf.gfile.FastGFile(image_path).read() utf-8不能对ima...
tensorflow.python.framework.errors_impl.UnavailableError: OS Error
qq_40220833的博客
05-25 1144
今天在做分布式实例搭建的时候出现了上述问题。 出现现象：1.当只有1台参数服务器，1台计算服务器的时候，程序是没有问题的（也可能只是我尝试的那次没有问题） 2.当使用1台参数服务器，2台计算服务器的时候，程序就出现了上述的问题。 一开始以为是gRPC的问题，因为一开始出现的问题是 tensorflow.python.framework.errors_impl.UnknownError: C...
tensorflow-协调器
NockinOnHeavensDoor的博客
05-25 378
修改了代码跑不出来，可能版本变了？ – 即内存队列前,有一个文件队列，文件队列存放的参与训练的文件名，设为N个epoch，则文件名队列中有N个批次的所有文件名。 tf.train.slice_input_producer # -*- coding:utf-8 -*- import tensorflow as tf import numpy as np # 样本个数 ...
【TensorFlow】报错tensorflow.python.framework.errors_impl.DataLossError
zuolixiangfisher的博客
08-22 2603
今天在例行训练模型的时候突然遇到这个错误 很奇怪，模型可以迭代几千个batch，我以为是平台的问题，然后重新跑了一次，发现又是这样，迭代了几千个batch之后报这个错误。 google搜索了一下，发现有朋友遇到过，有的说是因为pycache存在的缘故，我理解是文件之间有引入加载关系，生成了一些临时cache文件，重新训练的时候如果不把上一次训练的cache文件删掉，那就会默认使用原来的文件，如果代码里有变动，那就会出现问题。但我的代码并未改动，因此不是这个原因。 后来看到参考资料1，发现可能是TFReco
cfg_errors.gocfg_errors.gocfg_errors.go
04-29
cfg_errors.gocfg_errors.gocfg_errors.gocfg_errors.gocfg_errors.gocfg_errors.gocfg_errors.gocfg_errors.gocfg_errors.gocfg_errors.go
Introduction-to-TensorFlow-for-Artificial-Intelligence-Machine-Learning-and-Deep-Learning-Coursera:该存储库包含Coursera课程针对人工智能，机器学习和深度学习的TensorFlow简介的作业
05-24
"Introduction-to-TensorFlow-for-Artificial-Intelligence-Machine-Learning-and-Deep-Learning-Coursera" 这个标题表明，这是一个关于TensorFlow的入门教程，特别针对人工智能（AI）、机器学习（ML）和深度学习...
kafka处理超大消息的配置 org.apache.kafka.common.errors.RecordTooLargeException
01-07
java.lang.RuntimeException: java.util.concurrent.ExecutionException: org.apache.kafka.common.errors.RecordTooLargeException: The request included a message larger than the max message size the server ...
Python库 | musamusa_errors-0.9.4.tar.gz
04-11
资源分类：Python库 所属语言：Python 资源全名：musamusa_errors-0.9.4.tar.gz 资源来源：官方 安装方法：https://lanzao.blog.csdn.net/article/details/101784059
C-99-common-errors.zip_Common Errors
09-14
"C-99-common-errors.zip" 包含了一个名为 "C 99个常见错误.pdf" 的文件，该文件详细阐述了99个C语言初学者可能会遇到的问题。以下是对这些常见错误的概述： 1. **语法错误**：这是最常见的错误类型，包括拼写错误...
Windows - tensorflow.python.framework.errors_impl.UnknownError: Failed to rename
wyfever的博客
11-13 1623
最近在调试tensorflow，环境是win10，IDE pycharm tensorflow 2.5 python3.6在使用tensorflow训练的模型时 ，模型能够训练出来，在保存未checkpoint时却不能被以.ckpt的形式保存，出现了很多问题，在经过几天的查询后，最终也得到了解决。这里感慨一下学习途中真的坎坷和艰难，顺便记录一下，希望帮助到有需要的同学。保存checkpoint调用的主要代码如下。
python错误tensorflow.python.framework.errors_impl.InvalidArgumentError Assign requires shapes of both
集电极
07-27 8616
python 错误tensorflow.python.framework.errors_impl.InvalidArgumentError: Assign requires shapes of both tensors to match. lhs shape= [24,1] rhs shape= [32,1] 错误 tensorflow.python.framework.errors_impl.InvalidArgumentError: Assign requires shapes of both ten
tensorflow object detection 训练自己的数据集
hust平凡之路 的博客
03-28 5114
上一篇博文，已经准备好了自己的数据集，本博文主要记录如何训练自己的数据集。参考博文https://www.cnblogs.com/qcloud1001/p/7677661.html一、准备预训练模型1、各种预训练模型下载地址   本博文选择  ssd_mobilenet_v1_coco模型解压压缩文件，得到如图所示的5个文件。在data所在目录下创建training文件夹，在里面新建dataset...
Deeplab V3+训练自己数据集全过程
热门推荐
jairana的博客
11-09 4万+
Deeplab V3+训练过程0. 参考链接1. 制作数据集1. 制作json文件。2. 批量转换 json--png3. 数据集目录制作4. 生成tfrecord2. 训练前代码准备1. 修改segmentation_dataset.py2. 修改train_utils.py3. 数据不平衡问题4. 修改train .py3. TRAIN1. train2. vis3. val4. 生成更方便观...
BUG 修复-模型训练报错: tensorflow.python.framework.errors_impl.NotFoundError
随意聊点
07-03 1万+
有latest_checkpoint的时候，移动文件目录或者电脑后，必须先运行，训练文件，保存最近模型。才可使用模型
TensorFlow使用next_batch()读取/tensorflow.python.framework.errors_impl.InvalidArgumentError: Expect 3 fi
深度强化学习(DeepRL)探索博客
09-25 1万+
分批次读取csv文件，如图： 源代码： import tensorflow as tf import numpy as np def readMyFileFormat(fileNameQueue): reader = tf.TextLineReader() key, value = reader.read(fileNameQueue) record_defa
tensorflow错误
summer2day的博客
09-09 1126
错误：tensorflow 中运行 tf.summary.FileWriter()发生 /tensorboard; Permission denied error的解决办法 解决方法： 把相对路径改为绝对路径 错误：INFO:tensorflow:Error reported to Coordinator: 解决方法 把with tf.Session() as sess:改成s...
tensorflow.python.framework.errors_impl.invalidargumenterror
最新发布
06-28
"tensorflow.python.framework.errors_impl.invalidargumenterror" 是 TensorFlow 报告的一种错误类型。它通常表示传递给 TensorFlow 函数或操作的某些参数不正确或无效。可能的原因包括参数的形状不匹配、数据类型...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值