安装kubeflow出现问题

最新推荐文章于 2023-11-13 09:53:00 发布
最新推荐文章于 2023-11-13 09:53:00 发布
阅读量1.6k 收藏
点赞数
文章标签： docker 容器 运维 kubernetes 机器学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_65342519/article/details/125895640
版权

部署的时候我发现 istio-system      istio-egressgateway和istio-system      kfserving-ingressgateway状态是 0/1     Running

这是 istio-system      istio-egressgateway describe的报错信息

 Normal   Scheduled  <unknown>              default-scheduler  Successfully assigned istio-system/istio-egressgateway-594f7cc859-jj5hv to node13
  Normal   Pulled     3m36s (x2 over 3m46s)  kubelet, node13    Container image "docker.io/istio/proxyv2:1.1.6" already present on machine
  Normal   Created    3m36s (x2 over 3m46s)  kubelet, node13    Created container istio-proxy
  Warning  Unhealthy  3m36s                  kubelet, node13    Readiness probe failed: Get http://10.244.1.136:15020/healthz/ready: dial tcp 10.244.1.136:15020: connect: connection refused
  Normal   Started    3m35s (x2 over 3m45s)  kubelet, node13    Started container istio-proxy
  Warning  Unhealthy  3m9s (x4 over 3m37s)   kubelet, node13    Readiness probe failed: Get http://10.244.1.136:15020/healthz/ready: net/http: request canceled (Client.Timeout exceeded while awaiting headers)
  Warning  Unhealthy  3m6s (x14 over 3m44s)  kubelet, node13    Readiness probe failed: HTTP probe failed with statuscode: 503
[root@node12 ~]#

 这是他的istio-system      istio-egressgateway logs信息

2022-07-20T08:46:59.457774Z	info	Envoy proxy is NOT ready: failed retrieving Envoy stats: Get http://127.0.0.1:15000/stats?usedonly: dial tcp 127.0.0.1:15000: connect: connection refused
2022-07-20T08:47:01.205260Z	info	Reconciling retry (budget 1)
2022-07-20T08:47:01.205344Z	info	Epoch 0 starting
2022-07-20T08:47:01.207203Z	info	Envoy command: [-c /etc/istio/proxy/envoy-rev0.json --restart-epoch 0 --drain-time-s 45 --parent-shutdown-time-s 60 --service-cluster istio-egressgateway --service-node router~10.244.1.136~istio-egressgateway-594f7cc859-jj5hv.istio-system~istio-system.svc.cluster.local --max-obj-name-len 189 --allow-unknown-fields -l warning]
2022-07-20T08:47:01.496886Z	info	Envoy proxy is NOT ready: failed retrieving Envoy stats: Get http://127.0.0.1:15000/stats?usedonly: dial tcp 127.0.0.1:15000: connect: connection refused
[2022-07-20 08:47:01.597][1129][warning][misc] [external/envoy/source/common/protobuf/utility.cc:174] Using deprecated option 'envoy.api.v2.Cluster.hosts' from file cds.proto. This configuration will be removed from Envoy soon. Please see https://www.envoyproxy.io/docs/envoy/latest/intro/deprecated for details.
[2022-07-20 08:47:01.597][1129][warning][misc] [external/envoy/source/common/protobuf/utility.cc:174] Using deprecated option 'envoy.api.v2.Cluster.hosts' from file cds.proto. This configuration will be removed from Envoy soon. Please see https://www.envoyproxy.io/docs/envoy/latest/intro/deprecated for details.
[2022-07-20 08:47:01.597][1129][warning][misc] [external/envoy/source/common/protobuf/utility.cc:174] Using deprecated option 'envoy.api.v2.Cluster.hosts' from file cds.proto. This configuration will be removed from Envoy soon. Please see https://www.envoyproxy.io/docs/envoy/latest/intro/deprecated for details.
[2022-07-20 08:47:01.697][1129][warning][config] [bazel-out/k8-opt/bin/external/envoy/source/common/config/_virtual_includes/grpc_stream_lib/common/config/grpc_stream.h:86] gRPC config stream closed: 14, no healthy upstream
[2022-07-20 08:47:01.697][1129][warning][config] [bazel-out/k8-opt/bin/external/envoy/source/common/config/_virtual_includes/grpc_stream_lib/common/config/grpc_stream.h:49] Unable to establish new stream
2022-07-20T08:47:03.458730Z	info	Envoy proxy is NOT ready: config not received from Pilot (is Pilot running?): cds updates: 0 successful, 0 rejected; lds updates: 0 successful, 0 rejected
[2022-07-20 08:47:04.051][1129][warning][config] [bazel-out/k8-opt/bin/external/envoy/source/common/config/_virtual_includes/grpc_stream_lib/common/config/grpc_stream.h:86] gRPC config stream closed: 14, upstream connect error or disconnect/reset before headers. reset reason: connection failure
2022-07-20T08:47:05.458204Z	info	Envoy proxy is NOT ready: config not received from Pilot (is Pilot running?): cds updates: 0 successful, 0 rejected; lds updates: 0 successful, 0 rejected
2022-07-20T08:47:07.457966Z	info	Envoy proxy is NOT ready: config not received from Pilot (is Pilot running?): cds updates: 0 successful, 0 rejected; lds updates: 0 successful, 0 rejected
[2022-07-20 08:47:08.291][1129][warning][config] [bazel-out/k8-opt/bin/external/envoy/source/common/config/_virtual_includes/grpc_stream_lib/common/config/grpc_stream.h:86] gRPC config stream closed: 14, upstream connect error or disconnect/reset before headers. reset reason: connection failure
2022-07-20T08:47:09.496773Z	warn	Epoch 0 terminated with an error: signal: killed
2022-07-20T08:47:09.496812Z	warn	Aborted all epochs
2022-07-20T08:47:09.496871Z	info	Epoch 0: set retry delay to 1m42.4s, budget to 0
2022-07-20T08:47:09.496885Z	info	Envoy proxy is NOT ready: failed retrieving Envoy stats: Get http://127.0.0.1:15000/stats?usedonly: dial tcp 127.0.0.1:15000: connect: connection refused
2022-07-20T08:47:11.457701Z	info	Envoy proxy is NOT ready: failed retrieving Envoy stats: Get http://127.0.0.1:15000/stats?usedonly: dial tcp 127.0.0.1:15000: connect: connection refused
2022-07-20T08:47:13.457774Z	info	Envoy proxy is NOT ready: failed retrieving Envoy stats: Get http://127.0.0.1:15000/stats?usedonly: dial tcp 127.0.0.1:15000: connect: connection refused
2022-07-20T08:47:15.457852Z	info	Envoy proxy is NOT ready: failed retrieving Envoy stats: Get http://127.0.0.1:15000/stats?usedonly: dial tcp 127.0.0.1:15000: connect: connection refused

 他们两个的报错信息是一样的，有没有大佬知道这个应该怎么处理啊！！！！！！！！！！！！！！

靓仔.753
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
install-kubeflow-1.3:安装Kubeflow 1.3
04-09
install-kubeflow-1.3 在Macbook上。 取自 。 使用切换到Kustomize 3.2.0！...brew tap nlamirault/kzenv https://github.com/nlamirault/kzenv/# remove "normal" kustomizebrew remove kustomizebrew install kzenvkzenv install 3.2.0kzenv use 3.2.0kustomize version 然后使用以下命令将Kubeflow安装到minikube... # tag of the Kubeflow versionVERSION=v1.3-...
istio-1.8.2 离线安装中出现的问题
changchangaaa的博客
02-24 3141
istio-1.8.2 离线安装中出现的问题 1.出现的istio-ingressgateway与istio-egressgateway的探针检测问题 这个问题国内外经常出现，google，百度都很多，但是没有人最终给一个确切的解决方法，分析很多，具体解决很少。在困扰半个多月，解决问题之后希望记录下来，让大家可以参考。 istio的版本为1.8.2，是这个时间较为新和稳定的一个版本，K8S的版本为1.18也是比较新和稳定的版本，集群环境为K8S上搭建了antrea网络，在此基础上搭建istio环境。以上环境
[kubernetes]故障排查 istio
爷来辣的博客
06-18 6208
[kubernetes]故障排查 istio 问题是这样的，部署了自己公司的服务，发现相关的的pods都只有二分之一个容器是READY的。 启动deployment 显示not ready 我这里的pod是由一个tomcat容器和一个sidecar容器组成的。 1/2 running表示sidecar容器有问题，通过查看日志并指定容器 发现的确是sidecar健康检查有问题 没有通过readiness probe测试的是istio-proxy这个容器。它的readiness probe规则定义如下。 re
解决集群 kubelet Readiness probe failed: calico/node is not ready: BIRD is not ready: Error querying BIR
qq_40184595的博客
02-27 1594
集群问题Readiness probe failed: calico/node is not ready: BIRD is not ready: Error querying BIRD: unable to connect to BIRDv4 socket: dial unix /var/run/calico/bird.ctl: connect: connection refused
Fedora 31 k8s kubernetes kubeasz 防火墙 firewalld 导致 harbor pod 容器 实例 网络不通 connect: connection refused
hknaruto的专栏
12-29 1626
防火墙开启状态，harbor pod出错 Events: Type Reason Age From Message ---- ------ ---- ---- ------- Warning Unhealthy 19m (x319 over 7h28m) kubelet, 10.51.72.167
Prometheus健康检查(Readiness probe failed)失败问题解决
最新发布
snowing
11-13 2898
Readiness probe failed: Get "http://10.244.40.157:3000/api/health": dial tcp 10.244.40.157:3000: connect: connection refused
kubeflow需要的镜像
08-09
kubeflow需要的镜像
kubeflow:在AKS中安装Kubeflow的脚本
03-20
脚本将在Azure Kubernetes服务中安装Kubeflow v1.2。可以从基于GUI（桌面）的RHEL7.x / Centos7.x / Ubuntu16计算机（跳转服务器）执行脚本。 跳转服务器应该有一些实用程序，例如wget可以下载kubeflow，tar可以提取...
kubeflow 使用手冊
01-19
kubeflow 使用手冊 kubeflow 是一個_machine learning_(機器學習) 平台，提供了一個完整的解决方案，涵蓋了機器學習的各個方面。kubeflow 的主要组件包括 Central Dashboard、Metadata、Jupyter Notebooks、...
kubeflow-tf：使用Terraform安装Kubeflow
02-17
在本文中，我们将深入探讨如何使用 Terraform 安装和配置 Kubeflow，以便在 Kubernetes 环境中高效地运行 TensorFlow 或其他机器学习框架。 首先，了解 Terraform 的基本概念至关重要。Terraform 通过创建、更新和...
k8s报错：Liveness probe failed: HTTP probe failed with statuscode: 404
热门推荐
Yucen的博客
02-01 2万+
k8s中pod部署失败，状态为CrashLoopBackOff，观察详细信息，报错： Warning Unhealthy 28m (x4253 over 2d23h) kubelet, 10.253.84.20 Liveness probe failed: HTTP probe failed with statuscode: 404 原来是liveness probe(存活探针)报错，观察yaml文件： …… livenessProbe: failureThresho
Failed to connect to API Server “192.168.31.197:6443“: Get https://192.168.31.197:6443/api/v1/namesp
qq_34988341的博客
11-26 1万+
node加入的时候出现这个错误 Failed to connect to API Server "192.168.31.197:6443": Get https://192.168.31.197:6443/api/v1/namespaces/kube-public/configmaps/cluster-info?timeout=10s: dial tcp 192.168.31.197:6443: connect: no route to host 是因为telnet的问题(首先排除下是不是因为token过期
Kubernetes初始化失败dial tcp 127.0.0.1:10248: connect: connection refused.
每天都要开心呀(#^.^#)
06-25 1825
亲测有用kubelet无法启动的终极原因
Readiness probe failed:connection refused
05-16 1万+
我的K8S集群在启动一个POD的时候说死起不来，然后就报下面的错误 Events: Type Reason Age From Message ---- ------ ---- ---- ...
kubernetes-Pod详解2
qq_53078033的博客
11-30 254
kubernetes-Pod详解2
Liveness和Readiness两种Health Check手段在Kubernetes中的使用
晨曦蜗牛
11-16 1万+
一.概述 强大的自愈能力是Kubernetes这一类容器编排管理引擎的一个重要特性。通常情况下，Kubernetes通过重启发生故障的容器来实现自愈。除此之外，我们还有其他方式来实现基于Kubernetes编排的容器的健康检查吗？Liveness和Readiness就是不错的选择。 二.实践步骤 2.1 系统默认的健康检查。 apiVersion: v1 kind: Pod metadata: ...
Kubernetes(5)job控制器
c13891506947的博客
07-05 341
Kubernetes(5)job控制器
Metrics Server安装以及报错解决
liuyanwuyu的博客
08-19 2万+
在查看kubernetes的测试环境中，使用top命令查看Pod的CPU、内存使用过程中，遇到以下问题： $ kubectl top po W0818 03:22:46.090578 26207 top_pod.go:140] Using json format to get metrics.e-protocol-buffers flag error: Metrics API not available 如上看到ERROR信息“Metrics API not available”，这是由于该Kue..
kubernetes 服务发现问题——kubedns[下部]
mx_steve的博客
12-23 2197
上一回有关kubedns服务中报错，这一回整体整理一下。 一，Kubedns工作原理 1.kubedns：kubedns监控并记录service与ip之间的映射关系，以树形结构将数据保存在内存中。 2.dnsmasq：从记录的地方查询相关的解析记录 特点：使用内存做dns缓存，速度非常快 3.exechealthz：用来监控kubedns和dnsmasq是否出现问题，做健康检测 二...
基于k8s安装配置kubeflow
05-25
安装Kubeflow需要以下步骤： 1. 安装Kubernetes集群 首先需要安装一个Kubernetes集群，可以使用云服务商提供的Kubernetes服务，也可以在本地使用Minikube安装。 2. 安装kubectl命令行工具 kubectl是Kubernetes的命令行工具，需要安装在本地或者远程机器上，使用kubectl可以管理Kubernetes集群。 3. 安装Kustomize工具 Kustomize是一个Kubernetes的配置管理工具，可以用于管理Kubernetes配置文件，需要安装在本地或者远程机器上。 4. 安装Kubeflow 使用Kustomize安装Kubeflow，可以使用官方提供的manifests文件安装，也可以使用自定义的manifests文件安装。 具体步骤如下： 1. 下载Kubeflow安装文件 可以从Kubeflow官网下载最新的Kubeflow安装文件，也可以从GitHub上下载。 2. 安装Kustomize Kustomize可以从官网下载最新版本，也可以使用Homebrew或者Linux包管理器安装。 3. 配置Kubeflow 使用Kustomize配置Kubeflow，可以使用官方提供的manifests文件，也可以使用自定义的manifests文件。 4. 安装Kubeflow 使用kubectl安装Kubeflow，可以使用官方提供的命令行工具，也可以使用自定义的命令行工具。 安装Kubeflow需要一定的技术储备和经验，建议在安装前仔细阅读官方文档和相关教程。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值