基于kubernetes的Prometheus监控mysql

已于 2022-05-25 10:34:03 修改
阅读量2.1k 收藏 1
点赞数
分类专栏： kuberntes 文章标签： kubernetes mysql docker
于 2022-01-19 15:25:12 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_58400622/article/details/122581903
版权

kubernetes Prometheus监控mysql

Prometheus监控Pod中的应用，比如mysql，有2种方法

1.exporter pod方式，通过这个pod去监控mysql service上的数据，在通过/metrics暴露监控数据。

2.sidecar方式，在mysql pod中起一个exporter container，暴露/metrics。

说明:下面的实验我基于前面的ingress-nginx Prometheus监控实验，所有的deployment和svc都在ingress-nginx namespace 下面。

1.部署mysql

创建pv–5G限制，hostpath方式

创建pvc–申请1G，供mysql使用

创建service–名为mysql，暴露3306端口

创建deployment–用户名root，密码password

---
apiVersion: v1
kind: PersistentVolume
metadata:
  name: mysql-pv-volume
  namespace: ingress-nginx
  labels:
    type: local
spec:
  storageClassName: manual
  capacity:
    storage: 5Gi
  accessModes:
    - ReadWriteOnce
  hostPath:
    path: "/mnt/data"

---
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: mysql-pv-claim
  namespace: ingress-nginx
spec:
  storageClassName: manual
  accessModes:
    - ReadWriteOnce
  resources:
    requests:
      storage: 1Gi

---
apiVersion: v1
kind: Service
metadata:
  name: mysql
  namespace: ingress-nginx
spec:
  ports:
  - port: 3306
  selector:
    app: mysql
  clusterIP: None

---
apiVersion: apps/v1 # for versions before 1.9.0 use apps/v1beta2
kind: Deployment
metadata:
  name: mysql
  namespace: ingress-nginx
spec:
  replicas: 1
  selector:
    matchLabels:
      app: mysql
  strategy:
    type: Recreate
  template:
    metadata:
      labels:
        app: mysql
    spec:
      containers:
      - image: mysql:5.6
        name: mysql
        env:
          # Use secret in real usage
        - name: MYSQL_ROOT_PASSWORD
          value: password
        ports:
        - containerPort: 3306
          name: mysql
        volumeMounts:
        - name: mysql-persistent-storage
          mountPath: /var/lib/mysql
      volumes:
      - name: mysql-persistent-storage
        persistentVolumeClaim:
          claimName: mysql-pv-claim

2.部署mysql exporter

创建service–名为mysql-export,暴露9104端口,供prometheus获取数据

创建exporter–env指定所监控的mysql service，需要用户名和密码

---
apiVersion: v1
kind: Service
metadata:
  name: mysql-exporter
  namespace: ingress-nginx
  labels:
    k8s-app: mysql-exporter
spec:
  selector:
    k8s-app: mysql-exporter
  ports:
  - name: mysql-exporter
    port: 9104
    protocol: TCP
  type: ClusterIP
---
apiVersion: apps/v1
kind: Deployment
metadata:
  name: mysql-exporter
  namespace: ingress-nginx
  labels:
    k8s-app: mysql-exporter
spec:
  replicas: 1
  selector:
    matchLabels:
      k8s-app: mysql-exporter
  template:
    metadata:
      labels:
        k8s-app: mysql-exporter
    spec:
      containers:
      - name: mysql-exporter
        image: prom/mysqld-exporter
        imagePullPolicy: IfNotPresent
        args: ["--collect.info_schema.processlist",
              "--collect.info_schema.innodb_metrics",
              "--collect.info_schema.tablestats",
              "--collect.info_schema.userstats",
              "--collect.engine_innodb_status",
              "--collect.slave_hosts"
              ]
        env:
        - name: DATA_SOURCE_NAME
          value: 'root:password@(mysql:3306)/mysql' # user:password@(hostname:3306)/
        resources:
          limits:
            cpu: 500m
            memory: 1Gi
          requests:
            cpu: 100m
            memory: 512Mi

3.Prometheus config修改获取数据

job名为mysql部分，是我添加的。

[root@master-1 ~]# kubectl edit cm prometheus-configuration-8hk4m6bf76 -n ingress-nginx
apiVersion: v1
data:
  prometheus.yaml: |
    global:
      scrape_interval: 10s
    scrape_configs:
    - job_name: 'ingress-nginx-endpoints'
      kubernetes_sd_configs:
      - role: pod
        namespaces:
          names:
          - ingress-nginx
      relabel_configs:
      - source_labels: [__meta_kubernetes_pod_container_port_number]
        action: keep
        regex: "10254"

    - job_name: 'mysql'
      static_configs:
      - targets: ['mysql-exporter:9104']
kind: ConfigMap
metadata:
  creationTimestamp: "2022-01-18T05:56:12Z"
  labels:
    app.kubernetes.io/name: prometheus
    app.kubernetes.io/part-of: ingress-nginx
  name: prometheus-configuration-8hk4m6bf76
  namespace: ingress-nginx

删除Prometheus pod ，让配置生效
[root@master-1 ~]# kubectl delete pod prometheus-server-779c8d44cf-9m2lp -n ingress-nginx
pod "prometheus-server-779c8d44cf-9m2lp" deleted

访问Prometheus页面 http://192.168.5.21:30221/

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

看到上面3个截图，说明数据获取成功了。

Granfana 导入Mysql 监控图表 http://192.168.5.21:31414/ 用户名: admin 密码: admin
推荐图标ID：https://grafana.com/dashboards/7362

在这里插入图片描述

接下来，我们用sidecar方式来监控。

4.sidecar方式来监控

核心原理: 在pod中起一个mysql，一个mysql-export,并暴露3306，9104端口提供服务。

创建对象pv,pvc,deployment,service

---
apiVersion: v1
kind: PersistentVolume
metadata:
  name: mysql-pv-volume-sidecar
  namespace: ingress-nginx
  labels:
    type: local
spec:
  storageClassName: manual
  capacity:
    storage: 5Gi
  accessModes:
    - ReadWriteOnce
  hostPath:
    path: "/mnt/data-sidecar"

---
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: mysql-pv-claim-sidecar
  namespace: ingress-nginx
spec:
  storageClassName: manual
  accessModes:
    - ReadWriteOnce
  resources:
    requests:
      storage: 1Gi

---
apiVersion: v1
kind: Service
metadata:
  name: mysql-sidecar
  namespace: ingress-nginx
spec:
  ports:
  - name: mysql
    port: 3306
  - name: prometheus
    port: 9104
  selector:
    app: mysql-sidecar

---
apiVersion: apps/v1 # for versions before 1.9.0 use apps/v1beta2
kind: Deployment
metadata:
  name: mysql-sidecar
  namespace: ingress-nginx
spec:
  replicas: 1
  selector:
    matchLabels:
      app: mysql-sidecar
  strategy:
    type: Recreate
  template:
    metadata:
      labels:
        app: mysql-sidecar
    spec:
      containers:
      - image: mysql:5.6
        name: mysql
        env:
        - name: MYSQL_ROOT_PASSWORD
          value: password
        resources:
          limits:
            cpu: 500m
            memory: 1Gi
          requests:
            cpu: 100m
            memory: 512Mi
        ports:
        - containerPort: 3306
          name: mysql
        volumeMounts:
        - name: mysql-persistent-storage-sidecar
          mountPath: /var/lib/mysql

      - name: mysql-exporter
        image: prom/mysqld-exporter
        imagePullPolicy: IfNotPresent
        args: ["--collect.info_schema.processlist",
              "--collect.info_schema.innodb_metrics",
              "--collect.info_schema.tablestats",
              "--collect.info_schema.userstats",
              "--collect.engine_innodb_status",
              "--collect.slave_hosts"
              ]
        env:
        - name: DATA_SOURCE_NAME
          value: 'root:password@(localhost:3306)/mysql' # user:password@(hostname:3306)/
        resources:
          limits:
            cpu: 500m
            memory: 1Gi
          requests:
            cpu: 100m
            memory: 512Mi
        ports:
        - containerPort: 9104
          name: mysql-exporter

      volumes:
      - name: mysql-persistent-storage-sidecar
        persistentVolumeClaim:
          claimName: mysql-pv-claim-sidecar

检查状态

[root@master-1 ~]# kubectl get pod,svc
NAME                                            READY   STATUS      RESTARTS   AGE
pod/grafana-74d85fc5bf-2dsjx                    1/1     Running     0          23h
pod/ingress-nginx-admission-create--1-654zx     0/1     Completed   0          29h
pod/ingress-nginx-admission-patch--1-8xpsp      0/1     Completed   2          29h
pod/ingress-nginx-controller-6d6c58c986-xwwfc   1/1     Running     0          24h
pod/mysql-68579b78bb-7szbp                      1/1     Running     0          26m
pod/mysql-exporter-fccfc9646-wcdvq              1/1     Running     0          36m
pod/mysql-sidecar-646f6b474f-n6wdf              2/2     Running     0          13m
pod/prometheus-server-779c8d44cf-22f72          1/1     Running     0          34m

NAME                                         TYPE           CLUSTER-IP       EXTERNAL-IP   PORT(S)                                      AGE
service/grafana                              NodePort       10.108.92.58     <none>        3000:31414/TCP                               23h
service/ingress-nginx-controller             LoadBalancer   10.96.194.255    <pending>     10254:30406/TCP,80:31361/TCP,443:32098/TCP   29h
service/ingress-nginx-controller-admission   ClusterIP      10.103.100.208   <none>        443/TCP                                      29h
service/mysql                                ClusterIP      None             <none>        3306/TCP                                     26m
service/mysql-exporter                       ClusterIP      10.106.183.8     <none>        9104/TCP                                     36m
service/mysql-sidecar                        ClusterIP      10.111.13.233    <none>        3306/TCP,9104/TCP                            13m
service/prometheus-server                    NodePort       10.99.70.216     <none>        9090:30221/TCP                               24h
[root@master-1 ~]#

5.Prometheus config修改获取数据

job名为mysql-sidecar部分，是我添加的。

[root@master-1 ~]# kubectl edit cm prometheus-configuration-8hk4m6bf76 -n ingress-nginx
apiVersion: v1
data:
  prometheus.yaml: |
    global:
      scrape_interval: 10s
    scrape_configs:
    - job_name: 'ingress-nginx-endpoints'
      kubernetes_sd_configs:
      - role: pod
        namespaces:
          names:
          - ingress-nginx
      relabel_configs:
      - source_labels: [__meta_kubernetes_pod_container_port_number]
        action: keep
        regex: "10254"

    - job_name: 'mysql'
      static_configs:
      - targets: ['mysql-exporter:9104']

    - job_name: 'mysql-sidecar'
      static_configs:
      - targets: ['mysql-sidecar:9104']

kind: ConfigMap
metadata:
  creationTimestamp: "2022-01-18T05:56:12Z"
  labels:
    app.kubernetes.io/name: prometheus
    app.kubernetes.io/part-of: ingress-nginx
  name: prometheus-configuration-8hk4m6bf76
  namespace: ingress-nginx

删除Prometheus pod ，让配置生效
[root@master-1 ~]# kubectl delete pod prometheus-server-779c8d44cf-9m2lp -n ingress-nginx
pod "prometheus-server-779c8d44cf-9m2lp" deleted

查看prometheus 页面 http://192.168.5.21:30221

在这里插入图片描述

在这里插入图片描述

Granfana 导入Mysql 监控图表 http://192.168.5.21:31414/ 用户名: admin 密码: admin
推荐图标ID：https://grafana.com/dashboards/7362

在这里插入图片描述

攻城狮JasonLong
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
MySQL 在 K8S 环境中部署与监控，一篇搞定它！
m0_73311735的博客
10-12 4692
MySQL是一个关系型数据库管理系统，由瑞典MySQL AB 公司开发，属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一，在 WEB 应用方面，MySQL是最好的 RDBMS (Relational Database Management System，关系数据库管理系统) 应用软件之一。
prometheus监控mysql和报警规则详细资料—超详细，超全面(带文档和相关软件包)
06-04
prometheus监控mysql和报警规则详细资料，带文档和相关软件包，超级详细
prometheus监控mysql规则
02-16
prometheus监控规则大全 node规则，redis监控，es监控，vmware监控，ipmi监控，ceph监控，etcd监控，k8s监控，mysql监控，openstack监控，os监控，交换机监控，windows监控，cdh监控，calico监控规则监控
Kubernetes 集群部署 MySQL+ mysqld_exporter (单节点)
Mo小泽的技术博客
09-06 700
文章目录Kubernetes 集群部署 MySQL (单节点)一、简介二、MySQL 参数配置1、创建 ConfigMap 存储 MySQL 配置文件2、 Kubectl 部署 ConfigMap三、MySQL 数据存储1、创建 PV2、创建 PVC 绑定 Mysql 存储空间3、通过 Kubectl 工具部署 PV、PVC四、Kubernetes 部署 MySQL1、创建 Deployment 部署 MySQL2、通过 Kubectl 工具部署 MySQL五、测试 MySQL 是否能够正常使用 Kuber
k8s之mysql容器数据持久化日志以及观测云日志分析
qq_36229701的博客
05-05 687
因为需要这几种日志，通过configmap自定义my.cnf中错误日志，慢查询，常规日志的位置；datadir目录中的数据和二进制日志也很重要，此次不涉及。metadata:data:my.cnf: |[mysqld]log-error=/var/lib/mysql/mysqld.log #错误日志log-bin=/var/lib/mysql/mysql-bin #二进制日志general_log_file=/var/lib/mysql/server2.log #常规日志。
一文详解微服务架构
狂奔之林的博客
08-23 509
本文将介绍微服务架构和相关的组件，介绍他们是什么以及为什么要使用微服务架构和这些组件。本文侧重于简明地表达微服务架构的全局图景，因此不会涉及具体如何使用组件等细节。 为了防止不提供原网址的转载，特在这里加上原文链接： https://www.cnblogs.com/skabyy/p/11396571.html 要理解微服务，首先要先理解不是微服务的那些。通常跟微服务相对的是单体应用，即将...
Prometheus监控云上MySQL
MichaelCoCoQ的博客
03-18 1382
Prometheus监控云上MySQL
k8s 部署servicemonitor 监听pod （示例）
Matthew__M的博客
02-17 1127
yaml
在k8s集群内搭建Prometheus监控平台
谢小鱼的博客
07-31 3239
在k8s集群内搭建Prometheus监控平台，并接入集群内部和集群外部的监控数据源
Prometheus 监控容器，node 服务器，mysql
qq_60271706的博客
06-16 880
是一个可以在一台宿主机上同时启动多个容器的工具--》容器编排--》一台宿主机上的多个容器，那个容器需要加载什么配置，使用那个镜像，开放那个端口，是否使用卷等参数的配置。[root@slave node_exporter-1.4.0-rc.0.linux-amd64]# node_exporter --help #查看使用手册。1.在一台服务器上使用脚本或者yum安装mysqld，然后安装mysqld_exporter，然后在Prometheus里添加mysqld这台被监控的服务器。
Prometheus监控MySQL(ECS版)
12-13
使用prometheus和grafana监控mysql数据库
Prometheus监控实践：Kubernetes集群监控
01-27
Kubernetes集群：监控Kubernetes集群本身的关键指标Kubernetes集群上部署的应用：监控部署在Kubernetes集群上的应用其中基础设施层监控指标的拉取肯定是来在Prometheus的node_exporter，因为我们要监控的服务器节点...
使用Grafana+Prometheus监控mysql服务性能
09-08
主要介绍了使用Grafana+Prometheus监控mysql服务性能的相关知识，本文给大家介绍的非常详细，对大家的工作或学习具有一定的参考借鉴价值,需要的朋友可以参考下方法
【云原生 | Kubernetes 系列】---Prometheus监控mysql
Q先生
09-03 957
Prometheus监控mysql
k8s中prometheus监控k8s外mysql
全栈测试笔记
12-07 499
k8s外安装mysql https://www.cnblogs.com/uncleyong/p/10739530.html 配置MySQL Exporter采集MySQL监控数据 创建yaml文件：vim mysql-exporter.yaml apiVersion: apps/v1 kind: Deployment metadata: name: mysql-exporter nam...
Kube-Prometheus Stack监控mysql
清风笑烟语
05-29 1003
准备环境 mysql 环境可以搭建2个或者一个来进行监控 我这个是搭建了2个一个使用容器启动，一个二进制安装如图所示 配置mysql-exporter进行采集数据 apiVersion: apps/v1 # 版本号 kind: Deployment # 类型 metadata: name: mysql-exporter # 名称 namespace: monitoring # 命名空间 spec: replicas: 1 # 副本书 selector: matchLabels:
云原生---k8s集群的pormetheus监控集群外mysql
ironceo的博客
01-03 683
prometheus
K8S部署Prometheus监控平台并实现监控告警
lc2288的博客
07-28 5814
K8S部署Prometheus监控平台并实现监控告警
Prometheus MySQL 性能监控
咸鱼老罗的博客
03-09 3094
Prometheus 是一种开源的监控系统和时序数据库，旨在收集和处理大量数据并提供可视化、监控警报等功能。它支持多种语言、多种部署方式，并且非常灵活，而且社区支持非常活跃，为用户提供了很多优秀的解决方案。MySQL 是一种流行的关系型数据库管理系统，用于存储和管理结构化数据。MySQL 数据库对于 web 应用程序、企业级应用程序和数据仓库等应用场景都非常适用。
如何使用prometheus监控mysql监控 如何使用prometheus监控redis 如何使用prometheus监控监控docker 如何使用prometheus监控k8s集群的过程 如何使用prometheus自动发现功能
最新发布
05-15
1. 如何使用prometheus监控mysql？ 使用prometheus监控mysql需要安装一个名为mysqld_exporter的exporter，该exporter可以在MySQL实例上运行并公开metrics。你可以在Prometheus配置文件中添加此exporter的配置，并使用PromQL查询语言查询MySQL指标，如查询数据库连接数、查询响应时间、查询缓存使用情况等。 2. 如何使用prometheus监控redis？ 使用prometheus监控redis需要安装一个名为redis_exporter的exporter，该exporter可以在Redis实例上运行并公开metrics。你可以在Prometheus配置文件中添加此exporter的配置，并使用PromQL查询语言查询Redis指标，如查询内存使用情况、查询命令执行次数、查询客户端连接数等。 3. 如何使用prometheus监控docker？ 使用prometheus监控docker需要安装一个名为node_exporter的exporter，该exporter可以在docker主机上运行并公开metrics。你可以在Prometheus配置文件中添加此exporter的配置，并使用PromQL查询语言查询docker主机指标，如查询CPU使用情况、查询内存使用情况、查询磁盘空间等。 4. 如何使用prometheus监控k8s集群的过程？ 使用prometheus监控k8s集群需要安装一个名为kube-state-metrics的exporter，该exporter可以在k8s集群中运行并公开metrics。你可以在Prometheus配置文件中添加此exporter的配置，并使用PromQL查询语言查询k8s集群指标，如查询pod数量、查询节点状态、查询资源使用情况等。 5. 如何使用prometheus自动发现功能？ prometheus自动发现功能可以通过配置文件中的文件SD（file_sd_config）或kubernetes SD（kubernetes_sd_config）进行配置。其中，文件SD允许你从文件中读取目标列表，而kubernetes SD允许你通过API服务器自动发现k8s集群中的目标。你可以在Prometheus配置文件中添加这些配置，并在Prometheus中启用自动发现功能。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

攻城狮JasonLong

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值