k8s部署mysql-exporter,mongo-exporter,redis-exporter,zookeeper-exporter,kafka-exporter

已于 2023-04-26 16:26:44 修改
阅读量4.2k 收藏 17
点赞数 2
分类专栏： Prometheus 文章标签： mysql kafka java-zookeeper
于 2021-07-16 14:01:55 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_32502263/article/details/118794813
版权

k8s部署mysql-exporter,mongo-exporter,redis-exporter监控

命名空间创建

先建立一个命名空间: prometheus-exporter 用来存放本环境的所有exporter

kubectl create ns prometheus-exporter

mysql监控

如果需要监控多个mysql,可以用一下部分再建一个mysql-exporter

1 创建mysql-exporter用户

CREATE USER 'exporter'@'%' IDENTIFIED BY 'XXXXXXXX';
GRANT PROCESS, REPLICATION CLIENT ON *.* TO 'exporter'@'%';
GRANT SELECT ON performance_schema.* TO 'exporter'@'%';

2 创建mysql-exporter

使用下面的yaml文件创建一个redis-exporter的Deployment‘

vi   01-deployment.yaml 

apiVersion: apps/v1
kind: Deployment
metadata:
  name: mysqld-exporter
  namespace: prometheus-exporter
  labels:
    app: mysqld-exporter
spec:
  selector:
    matchLabels:
      app: mysqld-exporter
  template:
    metadata:
      labels:
        app: mysqld-exporter
    spec:
      containers:
      - name: mysqld-exporter
        image: prom/mysqld-exporter
        env:
        - name: DATA_SOURCE_NAME
          value: exporter:password@(mysql:3306)/  #数据库连接： 用户：密码@（主机：端口）
        ports:
        - containerPort: 9104
          name: http

创建资源

kubectl apply -f  01-deployment.yaml

此时mysql-exporter创建完成

3 创建mysql-exporter服务

使用下面的yaml文件创建redis-exporter服务

vi 02-service.yaml

apiVersion: v1
kind: Service
metadata:
  labels:
    app: mysqld-exporter
  name: mysqld-exporter
  namespace: prometheus-exporter
spec:
  type: NodePort
  ports:
  - name: http
    port: 9104
    nodePort: 30018
    targetPort: http
  selector:
    app: mysqld-exporter

创建资源

kubectl apply -f  02-service.yaml

此时mysql-exporter 服务创建完成

4 测试

访问

curl localhost:30018/metrics

返回如下
[外链图片转存失败,源站可能有防盗 链机制,建议将图片保失败,源站可能有防盗链机制,建议将图片保存下来直接上传存上传(imXrAhMgOazw-1626414896614)(../img/中间件监控/image-20210716112515025.p83)(../img/中间件监控/image-20210716112515025.png)]

redis监控

1 创建redis-exporter

使用下面的yaml文件创建一个redis-exporter的Deployment‘

vi   01-deployment.yaml 

apiVersion: apps/v1
kind: Deployment
metadata:
  name: redis-exporter
  namespace: prometheus-exporter
  labels:
    app: redis-exporter
spec:
  selector:
    matchLabels:
      app: redis-exporter
  template:
    metadata:
      labels:
        app: redis-exporter
    spec:
      containers:
      - name: redis-exporter
        image: oliver006/redis_exporter:latest
        args: ["-redis.addr", "redis://10.20.20.155:6379"]  #这里填写redis地址
        ports:
        - containerPort: 9121
          name: http

创建资源

kubectl apply -f  01-deployment.yaml

此时redis-exporter创建完成

在这里插入图片描述

2 创建redis-exporter服务

使用下面的yaml文件创建redis-exporter服务

vi 02-service.yaml

apiVersion: v1
kind: Service
metadata:
  labels:
    app: redis-exporter
  name: redis-exporter
  namespace: prometheus-exporter
spec:
  type: NodePort
  ports:
  - name: http
    port: 9121
    nodePort: 30019
    targetPort: http
  selector:
    app: redis-exporter

创建资源

kubectl apply -f  02-service.yaml

此时redis-exporter 服务创建完成

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-qpjqETzA-1626414896620)(../img/中间件监控/image-20210716104555324.png)]

3 测试

访问

 curl localhost:30019/metrics

返回如下

在这里插入图片描述

mongo监控

1 创建mongodb-exporter

使用下面的yaml文件创建一个mongodb-exporter的Deployment‘

vi   01-deployment.yaml 

apiVersion: apps/v1
kind: Deployment
metadata:
  name: mongodb-exporter
  namespace: prometheus-exporter
  labels:
    app: mongodb-exporter
spec:
  selector:
    matchLabels:
      app: mongodb-exporter
  template:
    metadata:
      labels:
        app: mongodb-exporter
    spec:
      containers:
      - name: mongodb-exporter
        image: ssheehy/mongodb-exporter
        env:
        - name: MONGODB_URI
          value: mongodb://localhost:27017   #mongo地址
        ports:
        - containerPort: 9216
          name: http

创建资源

kubectl apply -f  01-deployment.yaml

此时mongodb-exporter创建完成

2 创建mongodb-exporter服务

使用下面的yaml文件创建mongodb-exporter服务

vi 02-service.yaml

apiVersion: v1
kind: Service
metadata:
  labels:
    app: mongodb-exporter
  name: mongodb-exporter
  namespace: prometheus-exporter
spec:
  type: NodePort
  ports:
  - name: http
    port: 9216
    nodePort: 30020
    targetPort: http
  selector:
    app: mongodb-exporter

创建资源

kubectl apply -f  02-service.yaml

此时mongodb-exporter 服务创建完成

3 测试

访问

 curl localhost:30020/metrics

返回如下

在这里插入图片描述

zookeeper监控

1 创建zookeeper-exporter

使用下面的yaml文件创建一个redis-exporter的Deployment‘

vi   01-deployment.yaml 

apiVersion: apps/v1
kind: Deployment
metadata:
  name: zookeeper-exporter
  namespace: prometheus-exporter
  labels:
    app: zookeeper-exporter
spec:
  selector:
    matchLabels:
      app: zookeeper-exporter
  template:
    metadata:
      labels:
        app: zookeeper-exporter
    spec:
      containers:
      - name: zookeeper-exporter
        image: josdotso/zookeeper-exporter
        args: ["-zookeeper", "10.20.20.155:30458"]  #这里填写zookeeper地址
        ports:
        - containerPort: 9141
          name: http

创建资源

kubectl apply -f  01-deployment.yaml

此时zookeeper-exporter创建完成

2 创建zookeeper-exporter服务

使用下面的yaml文件创建zookeeper-exporter服务

vi 02-service.yaml

apiVersion: v1
kind: Service
metadata:
  labels:
    app: zookeeper-exporter
  name: zookeeper-exporter
  namespace: prometheus-exporter
spec:
  type: NodePort
  ports:
  - name: http
    port: 9141
    nodePort: 30021
    targetPort: http
  selector:
    app: zookeeper-exporter

创建资源

kubectl apply -f  02-service.yaml

此时zookeeper-exporter 服务创建完成

3 测试

访问

 curl localhost:30021/metrics

kafka监控

1 创建kafka-exporter

使用下面的yaml文件创建一个redis-exporter的Deployment‘

vi   01-deployment.yaml 

apiVersion: apps/v1
kind: Deployment
metadata:
  name: kafka-exporter
  namespace: prometheus-exporter
  labels:
    app: kafka-exporter
spec:
  selector:
    matchLabels:
      app: kafka-exporter
  template:
    metadata:
      labels:
        app: kafka-exporter
    spec:
      containers:
      - name: kafka-exporter
        image: danielqsj/kafka-exporter
        args: ["--kafka.server=kafka:9092"]  #这里填写kafka地址
        ports:
        - containerPort: 9308
          name: http

创建资源

kubectl apply -f  01-deployment.yaml

此时kafka-exporter创建完成

2 创建kafka-exporter服务

使用下面的yaml文件创建kafka-exporter服务

vi 02-service.yaml

apiVersion: v1
kind: Service
metadata:
  labels:
    app: kafka-exporter
  name: kafka-exporter
  namespace: prometheus-exporter
spec:
  type: NodePort
  ports:
  - name: http
    port: 9308
    nodePort: 30022
    targetPort: http
  selector:
    app: kafka-exporter

创建资源

kubectl apply -f  02-service.yaml

此时kafka-exporter 服务创建完成

3 测试

访问

 curl localhost:30022/metrics

prometheus添加target

修改Prometheus配置文件

添加target

scrape_configs:
  - job_name: 'mysql'
    scrape_interval: 30s
    static_configs:
      - targets: ['10.20.20.153:30018']
  - job_name: 'redis'
    scrape_interval: 30s
    static_configs:
      - targets: ['10.20.20.153:30019']
  - job_name: 'mongodb'
    scrape_interval: 30s
    static_configs:
      - targets: ['10.20.20.153:30020']
  - job_name: 'zookeeper'
    scrape_interval: 30s
    static_configs:
      - targets: ['10.20.20.153:30021']
  - job_name: 'kafka'
    scrape_interval: 30s
    static_configs:
      - targets: ['10.20.20.153:30022']

重启Prometheus

访问Prometheus查看target

在这里插入图片描述

成功

李逍遥ya
关注
  • 2
    点赞
  • 踩
  • 17
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
zookeeper_exporter：用于监视ZooKeeper合奏的Prometheus出口商
02-04
普罗米修斯ZooKeeper出口商 的导出程序，用于监视集成。 建立和运行 make ./zookeeper_exporter 模式 zookeeper_exporter可以在两种模式下运行：参展商和显式。 在显式模式（默认）下，它将监视作为命令行参数给出的ZooKeeper服务器列表。 在参展商模式下，出口商将通过查询[参展商]自动发现服务器。 命令行args被假定为Exhibitor节点列表。 要启用参展商模式，请使用-exporter.discovery.exhibitor标志。
kafka-exporter-overview_rev5.json
09-30
Kafka现有开源的集群监控方案：kafka-manager、kafka-monitor、kafka-eagle、KafkaOffsetMonitor，但有所限制监控指标被...Kafka集群的监控方案倾向于使用Grafana + Prometheus，监控数据采集器使用Kafka_exporter。
zookeeper_exporter安装说明
weixin_42467874的博客
10-27 2996
Zookeeper监控采集器安装说明
推荐开源项目：Prometheus Zookeeper Exporter
最新发布
gitblog_00059的博客
06-18 438
推荐开源项目：Prometheus Zookeeper Exporter 项目地址:https://gitcode.com/dabealu/zookeeper-exporter 项目介绍 Prometheus Zookeeper Exporter 是一个轻量级的工具，用于将Zookeeper监控指标转换为Prometheus可识别的格式，方便您在Prometheus监控系统中实时查看和分析Zook...
使用prometheus监控zookeeper集群
运维打怪晋级之路
07-15 4709
使用prometheus监控zookeeper集群 1、踩过的坑 1.1、部署docker监控其中一个节点 [root@gtcq-gtmed-wm-public-02 local]# docker run -it -p 9141:9141 --name=zookeeper_exporter_m -d -v /etc/localtime:/etc/localtime carlpett/zookeeper_exporter -zookeeper 10.153.23.2:2181 依次部署其它节点后发现.
zookeeper使用zookeeper_export采集指标报错mntr is not executed because it is not in the whitelist.
m0_47293933的博客
10-19 993
zookeeper报错内容：Fetching metric from zookeeper. Reseching Zookeeper statistics.Unexpected format of resturned data, expected tab-seoarated key/value.mntr is not executed because it is not in the whitelist.）
ZK监控方法以及核心指标_zookeeper-exporter采集哪些指标
2301_79098963的博客
04-13 575
完成prometheus监控指标后，就可以配置grafana大盘，grafana的dashboard。探讨zk的监控数据采集方式以及需要关注的核心指标，便于日常生产进行监控和巡检。指标的暴露接口是7000，完成配置并重启zk后可以获取对应的指标。指标的暴露接口是7000，完成配置并重启zk后可以获取对应的指标。完成指标采集后，可以通过prometheus配置监控、告警和大盘。可以下载很多优秀的大盘进行借鉴，本文不再追溯。中记录了zk的关键指标进行配置告警，可以参考。1， 调整zoo.cfg配置，增加配置。
ZK监控方法以及核心指标
李姓门徒
01-25 816
探讨zk的监控数据采集方式以及需要关注的核心指标，便于日常生产进行监控和巡检。
K8S集群ssl证书监控ssl-exporter资源清单文件及镜像文件
01-14
总结来说，`ssl-exporter`资源清单文件和镜像文件是K8S集群中监控SSL证书的关键组件。通过正确配置和部署，我们可以实时监控SSL证书的状态，预防因证书过期导致的服务中断，从而保障系统的安全性与稳定性。在使用...
K8S监控宿主机资源node-exporter镜像及资源清单文件
12-27
在K8S中部署`node-exporter`通常有两种方法：通过 DaemonSet 或者作为单独的Pod。DaemonSet确保在每个节点上运行一个且仅运行一个`node-exporter`实例，这是最常见的方式，因为它能确保所有节点都被覆盖，且不会因为...
K8S集群ssl证书监控ssl-exporter资源清单及镜像文件
01-14
原文链接：https://blog.csdn.net/m0_37814112/article/details/122349602
K8S监控blackbox-exporter镜像及资源清单文件
01-18
**K8S监控blackbox-exporter镜像及资源清单文件详解** Kubernetes（简称K8S）作为现代云原生应用的基石，提供了一种高效、灵活的容器编排方式。在K8S环境中，对服务的健康状态进行监控至关重要。Blackbox Exporter...
5分钟搭建MySQL监控平台（mysql-exporter+Prometheus+Grafana）
m0_58093863的博客
04-11 4846
5分钟快速搭建自己的MySQL指标监控平台，实现指标数据可视化！
zookeeper_exporter使用注意事项
neheqi的博客
08-10 1019
github: 仓库地址 csdn: 文章链接 除了以上文章描述步骤外，在实操过程中遇到以下问题 无法发送zookeeper四字命令 错误日志： 日志有“mntr is not executed because it is not in the whitelist” 解决方法： 进入到zookeeper的zoo.cfg中，在zoo.cfg中添加如下一行代码并保存退出 #开启四字命令 4lw.commands.whitelist=* 未指定go版本 错误日志： Go version in go.mo
zookeeper-exporter部署手册
qq_43021786的博客
07-16 2201
目录zookeeper-exporter部署手册来源说明部署方式docker部署：二进制文件部署：自定义配置 zookeeper-exporter部署手册 来源 https://github.com/carlpett/zookeeper_exporter 说明 Zookeeper 3.4+ 的 Prometheus 导出器。它将mntr命令发送到 Zookeeper 节点并将输出转换为 Prometheus 格式。 部署方式 docker部署： docker run -it -p 9141:9141 --n
mysql-exporter监控部署(k8s内)tensuns专用
ApexPredator的博客
12-27 982
mysql-exporter监控部署(k8s内)tensuns专用
ZK监控方法以及核心指标_zookeeper-exporter采集哪些指标(1)
2301_79098963的博客
04-13 286
完成prometheus监控指标后，就可以配置grafana大盘，grafana的dashboard。指标的暴露接口是7000，完成配置并重启zk后可以获取对应的指标。完成指标采集后，可以通过prometheus配置监控、告警和大盘。下载zookeeper-exporter的安装包，并进行配置。可以下载很多优秀的大盘进行借鉴，本文不再追溯。中记录了zk的关键指标进行配置告警，可以参考。配置prometheus的指标采集任务。更多使用方法可以参考。
podman部署node-exporter
06-10
如果你想使用podman部署node-exporter，可以按照以下步骤进行操作： 1. 创建一个名为node-exporter的目录，用于存放node-exporter的配置文件和数据。使用以下命令创建： ``` mkdir node-exporter ``` 2. 创建一个名为node-exporter.service的systemd服务单元文件，用于启动node-exporter服务。使用以下命令创建： ``` sudo vi /etc/systemd/system/node-exporter.service ``` 将以下内容复制粘贴到文件中： ``` [Unit] Description=Node Exporter [Service] Restart=always ExecStartPre=podman rm node-exporter ExecStart=/usr/bin/podman run --name node-exporter --net=host --pid=host --privileged=true -v /proc:/host/proc:ro -v /sys:/host/sys:ro -v /:/rootfs:ro -v /etc/node-exporter:/etc/node-exporter:z quay.io/prometheus/node-exporter [Install] WantedBy=multi-user.target ``` 保存并退出文件。 3. 创建一个名为node-exporter的配置文件目录，用于存放node-exporter的配置文件。使用以下命令创建： ``` sudo mkdir /etc/node-exporter ``` 4. 创建一个名为node-exporter.yml的node-exporter配置文件，用于指定node-exporter的参数和监控对象。使用以下命令创建： ``` sudo vi /etc/node-exporter/node-exporter.yml ``` 将以下内容复制粘贴到文件中： ``` global: scrape_interval: 15s scrape_configs: - job_name: 'node' metrics_path: /metrics static_configs: - targets: ['localhost:9100'] ``` 保存并退出文件。 5. 重新加载systemd守护程序并启动node-exporter服务。使用以下命令执行： ``` sudo systemctl daemon-reload sudo systemctl enable node-exporter sudo systemctl start node-exporter ``` 6. 确认node-exporter服务已经成功启动。使用以下命令查看服务状态： ``` sudo systemctl status node-exporter ``` 如果服务状态显示为“active (running)”则表示服务已经启动成功。 希望以上步骤能够帮助你成功部署node-exporter服务。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值