K8S-Demo集群实践16：部署Kube-Prometheus

最新推荐文章于 2023-04-20 10:39:03 发布
最新推荐文章于 2023-04-20 10:39:03 发布
阅读量512 收藏 1
点赞数
分类专栏： k8s-demo 文章标签： kubernetes
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jasonhe2018/article/details/112981877
版权

K8S-Demo集群实践16：部署Kube-Prometheus

kube-prometheus 是一整套监控解决方案，使用 Prometheus 采集集群指标，Grafana 做展示，包含如下组件：

  • The Prometheus Operator
  • Highly available Prometheus
  • Highly available Alertmanager
  • Prometheus node-exporter
  • Prometheus Adapter for Kubernetes Metrics APIs （k8s-prometheus-adapter）
  • kube-state-metrics
  • Grafana

一、准备容器镜像

  • 因为容器镜像文件较大，如果不提前推送到私有容器镜像仓库，部署过程可能会失败

1、下载容器镜像

  • quay.io/prometheus-operator/prometheus-operator:v0.44.1
  • quay.io/prometheus-operator/prometheus-config-reloader:v0.44.1
  • quay.io/prometheus-operator/prometheus-operator:v0.44.1
  • quay.io/brancz/kube-rbac-proxy:v0.8.0
  • quay.io/prometheus/prometheus:v2.22.1
  • quay.io/prometheus/alertmanager:v0.21.0
  • quay.io/prometheus/node-exporter:v1.0.1
  • directxman12/k8s-prometheus-adapter:v0.8.2
  • quay.io/coreos/kube-state-metrics:v1.9.7
  • grafana/grafana:7.3.5

2、并推送到私有容器镜像仓库harbor.demo

  • harbor.demo/middleware/prometheus-operator/prometheus-operator:v0.44.1
  • harbor.demo/middleware/prometheus-operator/prometheus-config-reloader:v0.44.1
  • harbor.demo/middleware/prometheus-operator/prometheus-operator:v0.44.1
  • harbor.demo/middleware/brancz/kube-rbac-proxy:v0.8.0
  • harbor.demo/middleware/prometheus/prometheus:v2.22.1
  • harbor.demo/middleware/prometheus/alertmanager:v0.21.0
  • harbor.demo/middleware/prometheus/node-exporter:v1.0.1
  • harbor.demo/middleware/k8s-prometheus-adapter:v0.8.2
  • harbor.demo/middleware/coreos/kube-state-metrics:v1.9.7
  • harbor.demo/middleware/grafana:7.3.5

二、部署 kube-prometheus

1、下载部署yaml文件

[root@master1 ~]# cd /opt/install
[root@master1 install]# git clone https://github.com/coreos/kube-prometheus.git

2、修改yaml文件中的容器镜像地址

  • /opt/install/kube-prometheus/manifests/setup/prometheus-operator-deployment.yaml
  • /opt/install/kube-prometheus/manifests/alertmanager-alertmanager.yaml
  • /opt/install/kube-prometheus/manifests/grafana-deployment.yaml
  • /opt/install/kube-prometheus/manifests/kube-state-metrics-deployment.yaml
  • /opt/install/kube-prometheus/manifests/node-exporter-daemonset.yaml
  • /opt/install/kube-prometheus/manifests/prometheus-prometheus.yaml
  • /opt/install/kube-prometheus/manifests/prometheus-adapter-deployment.yaml

3、部署 prometheus-operator

[root@master1 ~]# cd /opt/install/kube-prometheus
[root@master1 kube-prometheus]# kubectl apply -f manifests/setup

4、部署 promethes metric adapter

[root@master1 ~]# cd /opt/install/kube-prometheus
[root@master1 kube-prometheus]# kubectl apply -f manifests/

三、查看运行状态

1、查看服务运行状态

[root@master1 kube-prometheus]# kubectl get svc -n monitoring
NAME                    TYPE        CLUSTER-IP     EXTERNAL-IP   PORT(S)                      AGE
alertmanager-main       ClusterIP   10.8.182.125   <none>        9093/TCP                     2d
alertmanager-operated   ClusterIP   None           <none>        9093/TCP,9094/TCP,9094/UDP   2d
grafana                 NodePort    10.8.31.234    <none>        3000:31253/TCP               2d
kube-state-metrics      ClusterIP   None           <none>        8443/TCP,9443/TCP            2d
node-exporter           ClusterIP   None           <none>        9100/TCP                     2d
prometheus-adapter      ClusterIP   10.8.5.198     <none>        443/TCP                      2d
prometheus-k8s          ClusterIP   10.8.212.162   <none>        9090/TCP                     2d
prometheus-operated     ClusterIP   None           <none>        9090/TCP                     2d
prometheus-operator     ClusterIP   None           <none>        8443/TCP                     2d
  • 问题：为什么有的服务ClusterIP显示为None？
  • 有时不需要或不想要负载均衡，以及单独的 Service IP，遇到这种情况，可以通过指定 Cluster IP（spec.clusterIP）的值为 “None” 来创建 Headless Service
  • 这个选项允许开发人员自由定义寻找服务的方式，从而降低与 Kubernetes 系统的耦合性。 应用仍然可以使用一种自注册的模式和适配器，对其它需要发现机制的系统能够很容易地基于这个 API 来构建。
  • 对这类 Service 并不会分配 Cluster IP，kube-proxy 不会处理它们，而且平台也不会为它们进行负载均衡和路由。
  • DNS 如何实现自动配置，依赖于 Service 是否定义了 selector。

2、查看Pod运行状态

[root@master1 kube-prometheus]# kubectl get pod -n monitoring
NAME                                  READY   STATUS    RESTARTS   AGE
alertmanager-main-0                   2/2     Running   20         2d
alertmanager-main-1                   2/2     Running   7          2d
alertmanager-main-2                   2/2     Running   15         2d
grafana-5d4bc79f5b-zfzgc              1/1     Running   10         2d
kube-state-metrics-575986bd49-l7drz   3/3     Running   29         2d
node-exporter-bxk7r                   2/2     Running   16         2d
node-exporter-jj7vp                   2/2     Running   16         2d
node-exporter-s2rbn                   2/2     Running   14         2d
node-exporter-t78rb                   2/2     Running   16         2d
node-exporter-trc5c                   2/2     Running   16         2d
node-exporter-zgc4d                   2/2     Running   20         2d
prometheus-adapter-6dd6c8dd64-jpjx4   1/1     Running   15         2d
prometheus-k8s-0                      2/2     Running   16         2d
prometheus-k8s-1                      2/2     Running   21         2d
prometheus-operator-79476dd78-lw6cc   2/2     Running   8          2d

3、查看endpoints

[root@master1 kube-prometheus]# kubectl get ep -n monitoring
NAME                    ENDPOINTS                                                              AGE
alertmanager-main       172.8.104.54:9093,172.8.135.28:9093,172.8.166.191:9093                 2d
alertmanager-operated   172.8.104.54:9094,172.8.135.28:9094,172.8.166.191:9094 + 6 more...     2d
grafana                 172.8.135.30:3000                                                      2d
kube-state-metrics      172.8.104.55:9443,172.8.104.55:8443                                    2d
node-exporter           192.168.66.10:9100,192.168.66.11:9100,192.168.66.12:9100 + 3 more...   2d
prometheus-adapter      172.8.104.52:6443                                                      2d
prometheus-k8s          172.8.135.33:9090,172.8.166.190:9090                                   2d
prometheus-operated     172.8.135.33:9090,172.8.166.190:9090                                   2d
prometheus-operator     172.8.166.132:8443                                                     2d

4、查看configmap

[root@master1 kube-prometheus]# kubectl get cm -n monitoring
NAME                                                  DATA   AGE
adapter-config                                        1      2d
grafana-dashboard-apiserver                           1      2d
grafana-dashboard-cluster-total                       1      2d
grafana-dashboard-controller-manager                  1      2d
grafana-dashboard-k8s-resources-cluster               1      2d
grafana-dashboard-k8s-resources-namespace             1      2d
grafana-dashboard-k8s-resources-node                  1      2d
grafana-dashboard-k8s-resources-pod                   1      2d
grafana-dashboard-k8s-resources-workload              1      2d
grafana-dashboard-k8s-resources-workloads-namespace   1      2d
grafana-dashboard-kubelet                             1      2d
grafana-dashboard-namespace-by-pod                    1      2d
grafana-dashboard-namespace-by-workload               1      2d
grafana-dashboard-node-cluster-rsrc-use               1      2d
grafana-dashboard-node-rsrc-use                       1      2d
grafana-dashboard-nodes                               1      2d
grafana-dashboard-persistentvolumesusage              1      2d
grafana-dashboard-pod-total                           1      2d
grafana-dashboard-prometheus                          1      2d
grafana-dashboard-prometheus-remote-write             1      2d
grafana-dashboard-proxy                               1      2d
grafana-dashboard-scheduler                           1      2d
grafana-dashboard-statefulset                         1      2d
grafana-dashboard-workload-total                      1      2d
grafana-dashboards                                    1      2d
prometheus-k8s-rulefiles-0                            1      2d

四、访问 Prometheus UI

  • 端口转发
[root@master1 ~]# kubectl port-forward --address 0.0.0.0 pod/prometheus-k8s-0 -n monitoring 9090:9090
Forwarding from 0.0.0.0:9090 -> 9090
Handling connection for 9090
Handling connection for 9090
  • 在浏览器访问 http://192.168.66.10:9090/graph
    在这里插入图片描述

五、访问 Grafana UI

  • 通过NodePort方式暴露服务：http://192.168.66.10:31253/login
  • 这里IP地址可以是集群中任何一个节点的IP地址
  • 默认用户名：admin 密码：admin，第一次登录会提示设置新密码
    在这里插入图片描述
  • 登录成功看到如下界面
    在这里插入图片描述

在这里插入图片描述

  • 下载一个中文模板并导入 https://grafana.com/grafana/dashboards/13105，该模板全面展示集群资源，包含K8S整体资源总览、微服务资源明细、Pod资源明细及K8S网络带宽，优化重要指标展示

在这里插入图片描述

附专栏链接

K8S-Demo集群实践00：搭建镜像仓库Harbor+安全扫描
K8S-Demo集群实践01：准备VMware虚拟机模板
K8S-Demo集群实践02：准备VMware虚拟机3台Master+3台Node
K8S-Demo集群实践03：准备集群各组件间HTTPS通讯需要的x509证书
K8S-Demo集群实践04：部署etcd三节点高可用集群
K8S-Demo集群实践05：安装kubectl并配置集群管理员账户
K8S-Demo集群实践06：部署kube-apiserver到master节点（3个无状态实例）
K8S-Demo集群实践07：kube-apiserver高可用方案
K8S-Demo集群实践08：部署高可用kube-controller-manager集群
K8S-Demo集群实践09：部署高可用kube-scheduler集群
K8S-Demo集群实践10：部署ipvs模式的kube-proxy组件
K8S-Demo集群实践11：部署ipvs模式的kube-kubelet组件
K8S-Demo集群实践12：部署Calico网络
K8S-Demo集群实践13：部署集群CoreDNS
K8S-Demo集群实践14：部署集群监控服务Metrics Server
K8S-Demo集群实践15：部署Kubernetes Dashboard
K8S-Demo集群实践16：部署Kube-Prometheus
K8S-Demo集群实践17：部署私有云盘owncloud（10.6版本）
K8S-Demo集群实践18：构建宇宙中第一个基础容器镜像

  • 先用起来，通过操作实践认识k8s，积累多了自然就理解了
  • 把理解的知识分享出来，自造福田，自得福缘
  • 追求简单，容易使人理解，知识的上下文也是知识的一部分，例如版本，时间等
  • 欢迎留言交流，也可以提出问题，一般在周末回复和完善文档
  • Jason@vip.qq.com 2021-1-28
jasonhe2018
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
k8s资源发布demo
11-03
收集了k8s学习必备的样例,安装好k8s集群后,将文件上传到服务器,解压后,再使用kubectl apply -f 文件名 运行即可
k8s 简单demo--部署 tomcat
天青如水的博客
08-30 5110
版本 根据参考资料1,2，下载 docker desktop 后，开启 Kubernetes 服务。当前版本为2.3.0.4， Kubernetes 为 v1.16.5。 通过 kubectl get nodes 命令可以看到节点情况，这里只有一个Master节点。 准备工作 创建一个单独的目录，来存放案例所需的文件 mkdir k8s-demo && cd k8s-demo 构建镜像 这里直接用名docker pull tomcat 下载 tomcat，需要对tomcat 镜像进行修
K8S集群搭建简单示例
Admin
11-01 625
#配置镜像加速器，重启docker mkdir -p /etc/docker tee /etc/docker/daemon.json <<-'EOF' { "registry-mirrors": ["https://zmnwbg20.mirror.aliyuncs.com"] } EOF systemctl daemon-reload systemctl restart docker #安装kubelet kubeadm kubectl，--nogpgcheck表示跳过公钥检查 yum i
K8S demo
justsomebody126的专栏
01-27 257
转自：https://blog.csdn.net/hahaxu/article/details/79772296 kubernetes 从一个简单例子开始 参考 《kubernetes 权威指南》一节的 从一个简单例子开始，操作实录。 一、描述 创建一个简单的Java web程序，此 Java Web 应用 的 结构 比较 简单， 是一 个 运行 在 Tomcat 里 的 Web App，...
k8s 配置ingress 并做一个demo
weitao_11的博客
02-28 575
• k8s 配置好之后除了 nodeport 以外都是对集群内部的行为 • 使用nodeport 并不是很友好，要自己处理很多的端口管理 • 使用ingress 可以更好的整合配置服务
kube-prometheus-release-0.12部署yaml文件
最新发布
11-10
`kube-prometheus`是一个流行且全面的解决方案，它整合了Prometheus和Grafana，用于K8S集群的监控。在“kube-prometheus-release-0.12”这个版本中，提供了必要的yaml部署文件，适用于Kubernetes 1.24和1.25版本。 ...
k8s集群安装kube-prometheus kube-prometheus安装脚本
07-07
在Kubernetes（k8s）集群中安装`kube-prometheus`是监控系统的重要步骤，它提供了全面的集群监控解决方案，包括Prometheus、node-exporter、kube-state-metrics、Grafana等组件。`kube-prometheus`是Prometheus的...
基于kube-prometheus-stack部署监控K8S告警系统资源合集
11-08
`kube-prometheus-stack` 是一个流行的 Kubernetes 监控解决方案，它结合了 Prometheus 和 Grafana 的强大功能，提供了全面的 K8S 集群监控和告警能力。本资源合集将详细介绍如何基于 `kube-prometheus-stack` 部署...
k8s-prometheus-配置文件.zip
01-11
Prometheus是监控和警报工具，它在 Kubernetes (k8s) 集群中扮演着关键角色，用于收集和存储各种服务的度量数据。Grafana 是一个流行的可视化平台，可以与 Prometheus 结合使用，展示这些度量数据并创建自定义仪表板...
k8s-gitlab-ci-demo
02-27
1、spring-boot应用程序，内部...4、集成kube-prometheus监控功能，可查看JVM相关信息。 5、word转pdf的demo，以及转换乱码的解决方案。 6、可在Kubernetes 上运行。 7、需要自添加总问字体文件到和license.xml
k8s.gcr.io/kube-proxy:v1.17.3镜像包
03-06
kubernetes的k8s.gcr.io/kube-proxy:v1.17.3镜像包，版本为v1.17.3。文件是kube-proxy_v_1_17.3.tar
77： kubernetes dashboard、kubernetes 监控prometheus、kubernetes HPA集群、总结和答疑
weixin_46575696的博客
11-17 440
CASE Top NSD CLOUD DAY10 案例1：安装部署metrics-server 案例2：安装部署dashboard 案例3：安装部署pometheus（一） 案...
kube-rbac-proxy
云淡风轻
09-27 3398
参考 https://github.com/brancz/kube-rbac-proxy/tree/master/examples/non-resource-url https://brancz.com/2018/02/27/using-kube-rbac-proxy-to-secure-kubernetes-workloads/
K8s-Demo实现
Agnes-井朝
05-27 1983
简介 Kubernates的基础界面 常用的操作   将创建好的yaml文件通过Create按钮创建所需资源项目。 Dashbord:   可以通过Dashbord查看集群详情：cpu、memory、filesystemm、network等，同样也可以定制化符合自己需求的格式页面。 Demo   下面介绍如何通过kubenetes来部署一个tomcat。   1. 从d...
在k8s集群上部署一个电商demo
qq_37256882的博客
11-29 928
在这篇文章里面，将用一个k8s集群搭建一个电商demo。）由于服务器数量限制，这里使用的k8s集群采用了一主二从的结构，同时由于服务器性能的限制，电商demo的MySQL数据库部署在master主机，redis缓存及其他前端、后端程序部署分别部署在2个节点中。这套电商demo的逻辑结构如下。
gcr.io镜像及quay.io镜像加速配置示例
qq_39440086的博客
07-01 8633
一、gcr.io镜像加速 由于众所周知的原因，google镜像在国内是无法拉取的。我们可以使用中科大镜像进行拉取。 1.1 使用中科大镜像 我们拉取的google镜像是以下形式： docker pull gcr.io/xxx/yyy:zzz 那么使用中科大镜像，应该是这样拉取： docker pull gcr.mirrors.ustc.edu.cn/xxx/yyy:zzz 以拉取gcr.io/ku...
使用Jenkins对k8sdemo项目进行(CI/CD)持续集成和部署
qq_37256882的博客
12-02 750
实际的部署过程会很繁杂，需要反复配置，这也模拟了真实的工作过程，需要认真和仔细，最后的部署完成的结果如下后台检查，容器也运行正常登录网址，点击各个栏目也ok，如此，我们完成了demo项目的jenkins CI/CD。
Kubernetes实战prometheus部署
zhangkangren的博客
04-20 785
​ 本文介绍Prometheus 监控及在k8s集群中使用node-exporter、prometheus、grafana对集群进行监控。实现原理类似ELK、EFK组合。node-exporter组件负责收集节点上的metrics监控数据，并将数据推送给prometheus, prometheus负责存储这些数据，grafana将这些数据通过网页以图形的形式展现给用户。现在我们正式开始部署工作。这里假设你已经为你的K8S集群部署过kube-dns或者coredns了。
k8s部署kube-prometheus
MssGuo的博客
10-21 2612
k8s部署kube-prometheus
K8s-cks必备技能攻略
02-07
控制节点包含 kube-apiserver、kube-scheduler 和 kube-controller-manager，它们协同工作以维护集群状态。kube-apiserver 是集群的入口点，提供 API 服务并处理所有集群数据的持久化，这些数据存储在 Etcd 中。kube...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值