node-exporter+cadvisor+prometheus+grafana

已于 2024-06-13 14:39:16 修改
阅读量966 收藏 27
点赞数 26
文章标签： prometheus grafana
于 2024-06-13 12:05:01 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/unito/article/details/139607903
版权

目录

各组件解释

Node Exporter:

cAdvisor:

Prometheus:

Grafana:

Prometheus的基础架构

环境概述

一、分别在宿主机安装部署node-exporter+cadvisor

node-exporter

1、在github上下载tar包

2、解压并重定向

3、创建node_exporter用户

4、给node_exporter命令设置属主属组并赋权

5、设置开机自启动

6、查看是否监听9100端口

cadvisor

1、下载cadvisor

2、重定向

3、设置属主属组并赋权

4、设置开机自启动

5、开放8080跟9100端口

二、使用 Docker 部署 Prometheus

1、创建 Prometheus 配置文件 prometheus.yml，配置数据源

2、使用 Docker 运行 Prometheus，并挂载配置文件。

3、开放端口

4、浏览器访问Prometheus

三、使用 Docker 部署 Grafana

1、使用 Docker 运行 Grafana。

2、修改配置文件使其支持邮箱告警

3、开放3000端口

4、配置grafana

5、添加数据源

6、导入仪表盘

四、配置邮箱告警

1、创建文件夹

2、添加收件人

3、配置告警通知策略

4、配置告警规则

5、保存退出，当前是正常状态

6、配置完会增加一个监控中的心

7、触发告警条件后变成pending

8、五分钟后变为firing

9、收到告警邮箱

各组件解释

  1. Node Exporter:

    • Node Exporter 是一个用于收集服务器硬件和操作系统级别的指标的工具，它是 Prometheus 生态系统的一部分。
    • 它暴露了一个 HTTP 服务，默认在端口 9100 上，提供了一系列的 metrics，包括 CPU 使用率、内存使用情况、磁盘空间、网络带宽等信息。
    • Node Exporter 适用于各种 Linux、Windows、macOS 等操作系统，是监控服务器基础资源的常用工具。

  2. cAdvisor:

    • cadvisor（Container Advisor）是 Google 开发的一个容器监控工具，用于收集、监控、分析 Docker 容器的性能和资源使用情况。
    • 它是一个运行在容器中的守护进程，可以监控宿主机和容器级别的资源使用情况，包括 CPU 使用率、内存使用情况、网络吞吐量、文件系统使用情况等。
    • cadvisor通常用于帮助开发者和系统管理员理解容器的资源使用模式，诊断性能问题，以及优化容器的资源分配。

  3. Prometheus:

    • Prometheus 是一个开源监控系统，具有高度可扩展性和灵活性，由 SoundCloud 开发并捐赠给了 Cloud Native Computing Foundation。
    • 它通过 HTTP pull 模型从配置好的目标（如 Node Exporter 和 cAdvisor）定期抓取指标数据，并存储在本地磁盘上。
    • Prometheus 提供了强大的数据模型和查询语言（PromQL），支持高维数据查询和丰富的数据可视化功能。
    • 它还包含一个告警manager，用于处理和发送告警通知。

  4. Grafana:

    • Grafana 是一个开源的数据可视化工具，它支持多种数据源，包括 Prometheus、InfluxDB、Graphite 等。
    • 它允许用户创建自定义的仪表板和图表，用于展示和监控时间序列数据。
    • Grafana 提供了丰富的可视化选项，如折线图、柱状图、热图等，并且支持告警和通知功能。
    • 它还支持用户和团队协作，可以创建多个组织和用户，并控制对仪表板的访问权限。

Prometheus的基础架构

环境概述

宿主机直接安装node-exporter+cadvisor，然后使用docker部署prometheus,grafana，最后在grafana配置邮箱告警。

主机名IP地址操作系统版本
node01192.168.0.128ubuntu20.04.5 LTS
node02192.168.0.129ubuntu20.04.5 LTS
node03192.168.0.130ubuntu20.04.5 LTS

一、分别在宿主机安装部署node-exporter+cadvisor

node-exporter

1、在github上下载tar包

https://github.com/prometheus/node_exporter/releasesicon-default.png?t=N7T8https://github.com/prometheus/node_exporter/releaseshttps://github.com/google/cadvisor/releases/icon-default.png?t=N7T8https://github.com/google/cadvisor/releases

wget https://github.com/prometheus/node_exporter/releases/download/v1.8.1/node_exporter-1.8.1.linux-amd64.tar.gz

2、解压并重定向

tar zxf node_exporter-1.8.1.linux-amd64.tar.gz

mv node_exporter /usr/local/bin/

3、创建node_exporter用户

useradd -M -s /bin/false node_exporter

4、给node_exporter命令设置属主属组并赋权

chown node_exporter:node_exporter /usr/local/bin/node_exporter

chmod 777 /usr/local/bin/node_exporter

5、设置开机自启动

cat << EOF | sudo tee /etc/systemd/system/node_exporter.service
[Unit]
Description=Node Exporter
After=network.target

[Service]
User=node_exporter
Group=node_exporter
Type=simple
ExecStart=/usr/local/bin/node_exporter

[Install]
WantedBy=multi-user.target
EOF

systemctl start node_exporter

systemctl enable node_exporter

6、查看是否监听9100端口

ss -anptl | grep 9100

cadvisor

1、下载cadvisor

wget https://github.com/google/cadvisor/releases/download/v0.49.1/cadvisor-v0.49.1-linux-amd64

2、重定向

mv cadvisor-v0.49.1-linux-amd64 /usr/local/bin/cadvisor

3、设置属主属组并赋权

 chown root:root /usr/local/bin/cadvisor

 chmod 777 /usr/local/bin/cadvisor

4、设置开机自启动

cat << EOF | sudo tee /etc/systemd/system/node_exporter.service
[Unit]
Description=Cadvisor
After=network.target

[Service]
User=root
Group=root
Type=simple
ExecStart=/usr/local/bin/cadvisor

[Install]
WantedBy=multi-user.target
EOF

systemctl start cadvisor

systemctl enable cadvisor

5、开放8080跟9100端口

ufw allow 8080

ufw allow 9100

二、使用 Docker 部署 Prometheus

1、创建 Prometheus 配置文件 prometheus.yml，配置数据源

mkdir /data/to/prometheus/ -p

cat /data/to/prometheus/prometheus.yml

global:
  scrape_interval: 15s # 默认抓取间隔，可以针对每个作业单独设置
  evaluation_interval: 15s # 规则评估间隔

alerting:
  alertmanagers:
  - static_configs:
    - targets:
      # - alertmanager:9093

rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"

scrape_configs:
  # Prometheus 自身 metrics
  - job_name: 'prometheus'
    static_configs:
      - targets: ['localhost:9090']

  # node_exporter targets
  - job_name: 'node'
    static_configs:
      - targets: ['192.168.0.128:9100', '192.168.0.129:9100', '192.168.0.130:9100']

  # cadvisor targets
  - job_name: 'cadvisor'
    static_configs:
      - targets: ['192.168.0.128:8080', '192.168.0.129:8080', '192.168.0.130:8080']

2、使用 Docker 运行 Prometheus，并挂载配置文件。

docker run -d \
  --name=prometheus \
  -p 9090:9090 \
  -v /data/to/prometheus/prometheus.yml:/etc/prometheus/prometheus.yml \
  prom/prometheus

3、开放端口

ufw allow 9090

4、浏览器访问Prometheus

http://192.168.0.128:9090

点击Status-Targets看到节点信息都在说明没问题


 

三、使用 Docker 部署 Grafana

1、使用 Docker 运行 Grafana。

docker run -d \
  --name=grafana \
  -p 3000:3000 \
  -e "GF_SECURITY_ADMIN_PASSWORD=secret" \
  -v /data/to/grafana-data/grafana.ini:/etc/grafana/grafana.ini \
  grafana/grafana

2、修改配置文件使其支持邮箱告警

怎么弄的配置文件呢

先随便运行一台grafana，用docker stop给他停了

然后用docker cp grafana:/etc/grafana/grafana.ini /data/to/grafana-data/grafana.ini就copy下来了

vim grafana.ini

3、开放3000端口

ufw allow

4、配置grafana

浏览器访问http://192.168.0.128:3000

5、添加数据源

6、导入仪表盘

访问grafana官网的仪表盘模板

Grafana dashboards | Grafana Labs

我这分别导入node_exporter，cadvisor

导入方式可以选择模板号跟json文件导入

这里选择模板号导入，点击Copy ID to clipboard复制模板号

回到自己的grafana页面

四、配置邮箱告警

1、创建文件夹

2、添加收件人

3、配置告警通知策略

4、配置告警规则

5、保存退出，当前是正常状态

6、配置完会增加一个监控中的心

7、触发告警条件后变成pending

8、五分钟后变为firing

9、收到告警邮箱

洪栋梁
关注
  • 26
    点赞
  • 踩
  • 27
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Prometheus收集node-exporter和cadvisor指标数据
梵修
02-08 1003
cadvisor可以对节点上的容器进行实时监控和数据采集，包括容器的cpu、内存使用情况、网络吞吐量和文件系统使用量等。grafana官网已经提供了许多模板，我们可以下载自己需要的模板，然后导入本地grafana。在官网寻找合适的模板，这里选择的模板是下面这个，ID是15798。以node-exporter模板为例，首先在官网搜索。下载此模板对应的json文件，然后导入grafana。下载模板对应的json文件，然后导入Grafana。然后选择需要的模板，点击查看详情。
一文详解Docker容器监控神器：cAdvisor、node exporter、prometheus
Lion_Long的博客
03-13 3633
Docker容器监控在云原生时代对于确保容器化应用的稳定、高效和安全运行具有不可或缺的重要性。有效的监控体系可以提升应用的可靠性和性能，保障业务的持续稳定运行。本文将深入探讨在云原生时代中，如何利用cAdvisor、node exporter和Prometheus这三个关键工具来实现Docker容器监控。文章将分别对这三个工具进行详细介绍，包括其功能、安装配置、监控指标以及与其他工具的集成。cAdvisor源码node exporter源码官方文档PromQL文档prometheus源码报警管理器文档。
四、cadvisor监控Pod、daemonset部署node-exporter、deployment部署prometheus server
weixin_58475203的博客
07-06 825
监控Pod指标数据需要使用cadvisor，cadvisor由谷歌开源，cadvisor不仅可以收集一台机器上所有运行的容器信息，还提供基础查询界面和http接口，方便其他组件如Prometheus进行数据抓取，cAdvisor可以对节点机器上的资源及容器进行实时监控和性能数据采集，包括CPU使用情况、内存使用情况、网络吞吐量及文件系统使用情况。
8-2 通过Node-Exporter和Cadvisor收集指标数据
分享云原生，容器，运维等干货知识
10-17 1494
Node_Exporter是我们最常用的exporter之一，用于收集宿主机的系统指标数据（包括CPU、内存和磁盘），导出的数据多数来源于/proc与/sys信息。默认绑定主机9100端口，并在路径/metrics显示实时信息。
prometheus&grafana&node_export搭建监控平台
weixin_54542209的博客
05-21 895
2、修改Prometheus的配置文件，这个文件在Prometheus容器的 /etc/prometheus/prometheus.yml。1、prometheus本身没有数据收集功能，需要用node_exporter收集。3、选择 Prometheus，填写相关信息，主要填url。5、把修改后的配置文件拷贝到Prometheus容器中。3、从Prometheus容器中拷贝配置文件到宿主机。2、docker安装prometheus。3、创建Prometheus容器。6、重启prometheus容器。
容器监控告警方案（cAdvisor + nodeExporter + alertmanager + prometheus +grafana）
weixin_34261739的博客
11-29 2303
一、prometheus基本架构 Prometheus 是一套开源的系统监控报警框架。它启发于 Google 的 borgmon 监控系统，由工作在 SoundCloud 的 google 前员工在 2012 年创建，作为社区开源项目进行开发，并于 2015 年正式发布。2016 年，Prometheus 正式加入 Cloud Native Computing Foundation，成为受欢迎度仅...
node-exporter prometheus cadvisor grafana 监控环境搭建.docx
12-23
本文档由自己亲手实验，包含 名词介绍、环境介绍、环境搭建 、抓取容器指标、抓取宿主机指标，最后附相关指标的示例
监视：使用NGINX，Grafana，Prometheus和多个Prometheus出口商（例如cAdvisor，node-exporter，postgres_exporter和jmx_exporter）的监视解决方案
02-02
本解决方案使用了一系列开源工具，包括NGINX、Grafana、Prometheus以及多个Prometheus导出器，如cAdvisor、node-exporter、postgres_exporter和jmx_exporter，构建了一套全面的监控体系。 首先，NGINX是一个高性能...
swarmprom：带有Prometheus，Grafana，cAdvisor，Node Exporter和Alert Manager的Docker Swarm工具
02-02
"swarmprom"项目就是专为Docker Swarm设计的一个监控解决方案，它整合了Prometheus、Grafana、cAdvisor、Node Exporter和Alert Manager等关键组件，构建了一个全面的容器监控体系。 首先，Prometheus是一款流行的...
dockprom：使用Prometheus，Grafana，cAdvisor，NodeExporter和AlertManager监控Docker主机和容器
02-02
"Dockprom"项目提供了一套完整的解决方案，它整合了Prometheus、Grafana、cAdvisor、NodeExporter和AlertManager等工具，来实现这一目标。以下将详细阐述这些组件以及它们如何协同工作。 **Prometheus** 是一个强大...
xxexporter+prometheus+grafana监控常用的docker/mysql/es/kafaka/nginx/springboot2+jvm等中间件
01-07
模板id 监控内容 其它主要依赖 安装 8919 system中文 node-exporter 参考https://blog.csdn.net/qq_39506978/article/details/104267823 ...cadvisor node-exporter 参考https://blog.csdn.net/qq_39506
基于Prometheus做多维度的容器监控
热门推荐
曾庆国的博客
10-01 1万+
什么是prometheus？prometheus从官方介绍来说，他是一个开源的系统监控和报警工具，最初由SoundCloud推出。自2012成立以来，许多公司和组织都采用了prometheus，项目有一个非常活跃的开发者和用户社区。它现在是一个独立的开源项目，并独立于任何公司。 它具有以下特性：1. 多维度数据模型（由键/值对确定的时间序列数据模型） 2. 具有一个灵活的查询语言来利用这些维度 3
Prometheus：监控与告警：12:使用cadvisor + Node Exporter进行监控
知行合一 止于至善
01-21 3013
cadvisor和Node Exporter都可以提供监控数据，前者重点关注与容器的状态，后者关注与节点的状态，这篇文章使用Prometheus Server + cadvisor + Node Exporter + Grafana介绍如何进行设定以进行监控。
基于Docker搭建Prometheus+Grafana+node-exporter+cadvisor
春天的波菜
04-30 2398
部署系统：Centos 7.2以上 # 关闭防火墙 service firewalld stop # 不启用防火墙 systemctl disable firewalld 一、安装docker yum -y install docker systemctl start docker # 设置docker开机启动 systemctl enable docker 二、下载prometheus和grafana、node-exporter镜像包 docker pull prom/node-e...
kube-prometheus 系列1 项目介绍
云原生，DevOps，Kubernetes
08-16 4608
相比于手动安装并配置 Prometheus、Alertmanager、Grafana 等单个组件，使用 kube-prometheus 可以节省部署和管理Prometheus监控生态组件的时间和精力。kube-prometheus 是一个基于 Kubernetes 部署的 Prometheus 和 Grafana 监控系统的完整解决方案，是 Prometheus Operator 的实现之一。整个生态包含诸多组件，为了简化安装部署和配置高可用等，社区开发了kube-prometheus项目。
【打工日常】使用Prometheus+Grafana+Alertmanager+Webhook-dingtalk搭建监控平台
最新发布
全糖少冰我吃不了苦
07-23 74
【代码】【打工日常】使用Prometheus+Grafana+Alertmanager+Webhook-dingtalk搭建监控平台。
grafana对接zabbix数据展示
2401_83883919的博客
07-23 575
【配置】点击【模板】点击【创建模板】添加三个监控项：【名称】搜索【】创建的模板；点击上方【监控项】，点击创建【监控项】点击上方【触发器】点击【创建触发器】主机关联监控模板：左侧【配置】点击 【主机】点击【Zabbix server】查看：左侧点击【监测】点击【主机】点击【Zabbix server】点击最新数据，找到添加的三个模板主机关联监控模板：左侧【配置】点击 【主机】点击【Zabbix server】把监控模板用起来① 明确获取指标数据的方法。
k8s集群 安装配置 Prometheus+grafana
weixin_43258559的博客
07-17 1073
k8s集群 安装配置 Prometheus+grafana+alertmanager
写出一个dockerpose来搭建prometheus+grafana+alertmanager+blackbox-exporter+node_export
05-30
好的，以下是一个基于Docker Compose的搭建Prometheus、Grafana、Alertmanager、Blackbox Exporter和Node Exporter的示例： ```yaml version: "3" services: prometheus: image: prom/prometheus container_name: prometheus ports: - "9090:9090" volumes: - ./prometheus/prometheus.yml:/etc/prometheus/prometheus.yml command: - '--config.file=/etc/prometheus/prometheus.yml' - '--web.enable-admin-api' restart: always grafana: image: grafana/grafana container_name: grafana ports: - "3000:3000" volumes: - ./grafana:/var/lib/grafana restart: always alertmanager: image: prom/alertmanager container_name: alertmanager ports: - "9093:9093" volumes: - ./alertmanager/config.yml:/etc/alertmanager/config.yml command: - '--config.file=/etc/alertmanager/config.yml' restart: always blackbox-exporter: image: prom/blackbox-exporter container_name: blackbox-exporter ports: - "9115:9115" volumes: - ./blackbox-exporter/config.yml:/etc/blackbox-exporter/config.yml command: - '--config.file=/etc/blackbox-exporter/config.yml' restart: always node-exporter: image: prom/node-exporter container_name: node-exporter ports: - "9100:9100" restart: always ``` 需要注意的是，这里的配置文件都需要自己创建并且挂载到对应的容器中。例如，prometheus.yml、config.yml和config.yml分别对应Prometheus、Alertmanager和Blackbox Exporter的配置文件。同时，Grafana的数据目录也需要挂载到主机上以便数据持久化。 另外，需要注意的是这只是一个示例，具体的配置文件需要根据实际情况进行修改。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值