consul+promethus+grafana服务监控

一、介绍

使用此三个工具实现服务注册、监控、显示
github本人相关代码
包括docker-compose文件、volumes挂载的文件

参考文章如下 ：

1. https://mp.weixin.qq.com/s?__biz=MzA4MjkxMzMyNg==&mid=2654075110&idx=1& sn=8ad4e8fbae6e7e1280a2a9eb7951db14&chksm=843b29a7b34ca0b11a30d7d157c8c81028ad59e1ecf0c42e8f79b7808b3cb56487b74fad2608&scene=21#wechat_redirect
2. https://zhuanlan.zhihu.com/p/92454378
3. https://www.jianshu.com/p/413fd42ae660
4. consul使用手册-中文

1. consul

consul官网
Consul是一个服务管理软件。支持多数据中心下，分布式高可用的，服务发现和配置共享。采用 Raft 算法,用来保证服务的高可用。
本次主要使用consul中的服务健康检查来监控服务状态。

2. promethus

promethus官网
详解
详解
Prometheus是最初在SoundCloud上构建的开源系统监视和警报工具包

3. grafana

grafana官网
Grafana是一个跨平台的开源的度量分析和可视化工具，可以通过将采集的数据查询然后可视化的展示，并及时通知

二、安装

可以从各个工具官网进行下载、解压安装，详见官网。
本次采用docker部署。
前期准备，创建docker network

docker network create --subnet=172.30.1.0/24 serviceMonitor

采用docker-compose执行
注意docker-compose中加入网络
加入网络

1. consul安装

使用官方的镜像

docker search consul

docker-compose.yml 中consul部分如下

consul:
    image: consul
    container_name: consul
    restart: always
    ports:
     - "8500:8500"
    volumes:
     - /etc/localtime:/etc/localtime
     - /home/zwx/serviceMonitor/consul/config:/consul/config
     - /home/zwx/serviceMonitor/consul/data/:/consul/data/
    networks: 
      serviceMonitor:
        ipv4_address: 172.30.1.50
    logging:
      driver: json-file
      options:
        max-size: "200k" # 单个文件大小为200k
        max-file: "5" # 最多5个文件
    depends_on:
      - prometheus

注意:
需要给 consul 固定一个ip，为了它自己的config.json文件
consul命令参数
成功建立consul容器后，访问服务器ip:8500界面如下

注意:
此时consul中还未有注册的服务，待node-exporter和prometheus安装后，可添加json再重启consul容器。

可通过json进行服务注册:

• 在config中新建linux-exporter.json
• 添加如下内容

{
   "service": {
     "id": "linux_exporter",
     "name": "local_exporter",
     "address": "node-exporter",
     "port": 9100,
     "tags": [],
     "checks": [
       {
         "http": "http://node-exporter:9100/metrics",
         "interval": "60s"
       }
     ],
     "meta": {
       "checkport": "9100",
       "location": "test"
     }
   }
}

prometheus同样，只是端口为9090，服务http不同。

2. prometheus安装（包括node-exporter）

docker search prometheus
docker pull prom/prometheus

docker search node-exporter
docker pull prom/node-exporter

docker-compose.yml中如下

node-exporter:
    image: prom/node-exporter
    restart: always
    expose:
      - "9100"
    networks: 
      serviceMonitor:
        ipv4_address: 172.30.1.51
    container_name: node-exporter

prometheus:
    image: prom/prometheus
    container_name: myprom
    restart: always
    ports:
      - "9090:9090"
    volumes:
      - /etc/localtime:/etc/localtime
      - home/zwx/serviceMonitor/prometheus.yml:/etc/prometheus/prometheus.yml
    networks: 
      serviceMonitor:
        ipv4_address: 172.30.1.52
    logging:
      driver: json-file
      options:
        max-size: "200k" # 单个文件大小为200k
        max-file: "5" # 最多5个文件
    depends_on:
      - node-exporter

注意:
prometheus需要新建prometheus.yml挂载，路径见上。
这里获取了prometheus自己的、node-exporter和consul中的数据

global:
  scrape_interval: 60s
  evaluation_interval: 60s
 
scrape_configs:
  - job_name: prometheus
    static_configs:
      - targets: ['localhost:9090']
        labels:
          instance: prometheus
 
  - job_name: linux
    static_configs:
      - targets: ['node-exporter:9100']
        labels:
          instance: 'node-exporter'

  - job_name: consul-prometheus
    consul_sd_configs:
      - server:   'consul:8500'
        services: []
    relabel_configs:
      - source_labels: ['__meta_consul_service']
        regex:  .*prometheus.*
        action:  keep  

3. grafana

docker search grafana
docker pull grafana/grafana

docker-compose.yml 中

grafana:
    image: grafana/grafana
    container_name: grafana
    restart: always
    ports:
      - "3000:3000"
    networks:
      - "serviceMonitor"
    logging:
      driver: json-file
      options:
        max-size: "200k" # 单个文件大小为200k
        max-file: "5" # 最多5个文件

三、运行

1. consul界面

2. prometheus界面

3. grafana界面与配置

grafana打开后需要登录

默认的用户名密码均为admin
首先在侧边栏配置数据源，添加我们的prometheus


注意:
填写地址的时候，一定加上http:// 与端口（默认9090）
点击下方save&test
然后就可以开始自己添加图表啦！
参考官网教程

本次给出一个import方式，使用node-exporter数据
点击侧边栏Create–import

从官网找到想要的模板
官网搜索node

点击这个进去，找到编号，复制。

回到grafana中，填写编号，load

在下方选中数据源，然后点击import

出现dashboard，有模板内容。可对此进行自定义调整。

完毕