Docker监控方案实践telegraf+influxdb+Grafana

最新推荐文章于 2024-09-05 23:40:10 发布
最新推荐文章于 2024-09-05 23:40:10 发布
阅读量743 收藏 9
点赞数 8
分类专栏： docker 文章标签： docker grafana 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zlk_416/article/details/86645508
版权

Docker监控方案实践telegraf+influxdb+Grafana

1. telegraf+influxdb+grafana介绍

  1. telegraf Google开源的用于监控基础设施应用的工具，可以零配置运行在docker主机上来监控Docker主机以及Docker容器。其为单节点监控，只能监控一个主机, 作为docker服务的监控数据收集器，提供给influxdb

  2. influxdb InfluxDB 是用Go语言编写的一个开源分布式时序、事件和指标数据库，无需外部依赖、提供管理界面。提供基于时间序列，基于事件的可度量的实时计算功能。

  3. grafana Grafana可视化大型测量数据的开源程序，有灵活丰富的图形化选项，可以混合多种风格，多个数据源例如Graphite、zabbix、InfluxDB、Prometheus、mysql和OpenTSDB 详见配置页面。作为数据分析的可视化展示，与influxdb配合实现监控目的。

2.架构图

在这里插入图片描述
数据流向： docker主机+docker容器–>telegraf–>influxdb–>granfana–>web页面

3.搭建

1)环境准备

– 安装docker以及docker compose（目前武汉SQA所使用的CentOS测试机都已经装好），如果没有网上有很多资料教你怎么在CentOS安装Docker以及docker-compose

2)创建虚拟网卡（为了网络环境隔离）

docker network create monitor
#为docker主机创建一个网卡名为monitor

[root@localhost ~]# docker network create monitor
185165a2caf09d9055cd69e780ef09e430edb24555ffe97d123e2c788d4da895

docker network inspect monitor
#查看创建的虚拟网卡

[root@localhost ~]# docker network inspect monitor
[
    {
        "Name": "monitor",
        "Id": "185165a2caf09d9055cd69e780ef09e430edb24555ffe97d123e2c788d4da895",
        "Created": "2019-01-24T11:23:12.935020586-05:00",
        "Scope": "local",
        "Driver": "bridge",
        "EnableIPv6": false,
        "IPAM": {
            "Driver": "default",
            "Options": {},
            "Config": [
                {
                    "Subnet": "172.20.0.0/16",
                    "Gateway": "172.20.0.1"
                }
            ]
        },
        "Internal": false,
        "Attachable": false,
        "Ingress": false,
        "ConfigFrom": {
            "Network": ""
        },
        "ConfigOnly": false,
        "Containers": {},
        "Options": {},
        "Labels": {}
    }
]

3)部署influxdb

3.1)方式一：创建并启动influxdb容器，手动创建数据库用户名和密码

#命令：
docker run -d --name influxdb --net monitor -p 38083:8083 -p 38086:8086 tutum/influxdb:latest

[root@localhost ~]# docker run -d --name influxdb --net monitor -p 38083:8083 -p 38086:8086 tutum/influxdb:latest
d16f017a54a1a8658ab0a9f707a7698ec9c272cf2ebc7aa1fcd9b9d3bf867f3d

备注：-d: 守护线程运行
–name:容器名influxdb
–net:加入到网络monitor
-p: 主机端口(自己分配):容器端口 8083为infuxdb后台控制端口，8086是infuxdb的数据端口
tutum/influxdb:默认会在docker官方仓库pull下来influxdb镜像

容器创建完毕后docker ps –a查看容器是否是up状态。打开http://{ipaddr}:38083就会显示以下页面：
在这里插入图片描述
添加管理员账户和数据库：
在Query输入框依次输入以下两个命令，按enter执行。
##创建管理员角色 root 密码 123456 供使用

CREATE USER "root" WITH PASSWORD '123456' WITH ALL PRIVILEGES

##创建数据库 telegraf用于接收telegraf的监控数据

CREATE DATABASE "telegraf"

3.2）方式二：创建并启动influxdb容器的同时自动创建数据库用户名和密码

##命令：

docker run -d --name influxdb --privileged=true --net monitor -p 38083:8083 -p 38086:8086 -e ADMIN_USER=root -e INFLUXDB_INIT_PWD=root -e  PRE_CREATE_DB=telegraf tutum/influxdb

##执行效果：

[root@CNWH-CentOS timezone]# docker run -d --name influxdb --privileged=true --net monitor -p 38083:8083 -p 38086:8086 -e ADMIN_USER=root -e INFLUXDB_INIT_PWD=root -e  PRE_CREATE_DB=telegraf docker.io/tutum/influxdb
Unable to find image 'tutum/influxdb:latest' locally
latest: Pulling from tutum/influxdb
a3ed95caeb02: Pull complete 
23efb549476f: Pull complete 
aa2f8df21433: Pull complete 
ef072d3c9b41: Pull complete 
c9f371853f28: Pull complete 
a248b0871c3c: Pull complete 
749db6d368d0: Pull complete 
db2492acfcc3: Pull complete 
b7e7d2e12d53: Pull complete 
4272a53eef10: Pull complete 
9b2fefdb5321: Pull complete 
Digest: sha256:5b7c5e318303ad059f3d1a73d084c12cb39ae4f35f7391b79b0ff2c0ba45304b
Status: Downloaded newer image for tutum/influxdb:latest
da70d0cbc27659306fa2625b3eefb4b945b4a3729606fa01dbb5442bdeaebd07

4)部署telegraf

部署telegraf容器的命令如下：

docker run -d --name telegraf --privileged=true --net monitor -v /sqa/ennis/telegraf/telegraf.conf:/etc/telegraf/telegraf.conf:ro -v /var/run/docker.sock:/var/run/docker.sock:ro telegraf:latest

执行效果：

[root@CNWH-CentOS ennis]# docker run -d --name telegraf --privileged=true --net monitor -v /sqa/ennis/telegraf/telegraf.conf:/etc/telegraf/telegraf.conf:ro -v /var/run/docker.sock:/var/run/docker.sock:ro telegraf:latest
64a2cddd0a5b0e27984ae540dfb9ca3f2127c5e61dafe5793ef32be9e7682b7a

备注：
–privileged=true设置挂载目录权限为最大 否则挂载出错
–net monitor设置加入monitor网络
–volume=/:/rootfs:ro将容器/rootfs目录挂载到docker /
–d 是否后台运行容器服务
Docker ps –a 查看容器启动成功

5)部署Grafana

部署Grafana命令如下：

docker run -d --name grafana --net monitor -p 33000:3000 docker.io/grafana/grafana

执行效果：

[root@localhost ~]# docker run -d --name grafana --net monitor -p 33000:3000 docker.io/grafana/grafana
Unable to find image 'grafana/grafana:latest' locally
latest: Pulling from grafana/grafana
177e7ef0df69: Already exists 
2fef65ef6d27: Pull complete 
1853722c53f1: Pull complete 
799ba0768193: Pull complete 
1f95ab204ad8: Pull complete 
f9afb204ae74: Pull complete 
Digest: sha256:39b5b657dcba6d8628f650877c4027b672236bdfe761d6463fe05e2b97ee9eb4
Status: Downloaded newer image for grafana/grafana:latest
1a7698b2f3b39bd7f410013eba0b8dcd3767f9b0bc16dc13488b1715ad9baf7b

docker ps –a验证容器是否启动，然后打开http://{ipaddr}:33000 默认登录密码 admin/admin

4. docker-compose 搭建telegraf+influxdb+Grafana环境

1）docker-compose.yml

version: '3'

services:
  
 influxdb:
   image: tutum/influxdb
   container_name: influxdb
   networks:
    - monitor
   ports:
    - "8083:8083"
    - "8086:8086"
   environment:
    - ADMIN_USER="root"
    - INFLUXDB_INIT_PWD="root"
    - PRE_CREATE_DB="telegraf"
   restart: unless-stopped

 telegraf:
   image: telegraf
   container_name: telegraf
   networks:
      - monitor
#   depends_on:
#      - influxdb
   privileged: true
   volumes:
      - ./telegraf/telegraf.conf:/etc/telegraf/telegraf.conf:ro
      - /var/run/docker.sock:/var/run/docker.sock:ro
   restart: unless-stopped

 grafana:
   image: docker.io/grafana/grafana
   container_name: grafana
   networks:
    - monitor
   ports:
    - "33000:3000"
   restart: unless-stopped
   
networks:
  monitor:
    driver: bridge

2）shell 脚本

根据自己的情况编写shell脚本，下面脚本是一个例子

#!/bin/bash

# Launch Postgres
docker-compose up -d Postgres
sleep 15  
docker-compose up -d Rabbitmq
sleep 5
docker-compose up -d elasticsearch 
docker-compose up -d td-agent 
docker-compose up -d Runtime
sleep 5
docker-compose up -d Container

3）telegraf.conf

请观察另外一个博客

在这里插入图片描述

4）如果想销毁监控部署的环境

进入docker-compose.yml的目录下执行命令：
docker-compose down，则所有的安装文件都会被清除。

5. 数据展示

1)登录grafana
默认的登录密码为admin/admin 登录过程中可以修改密码。
2)设置数据源
打开Grafana主页http://{ipaddr}:33000，点击add data source，输入的值如下图
在这里插入图片描述

3)点击左上角的+号-> Create Dashboard->Graph,点击Panel title的下拉选择edit
在这里插入图片描述

点击General，可以修改图表的titel名称
在这里插入图片描述

点击Axes，可以修改Y轴的单位-unit，以及显示的数值范围Min/Max
在这里插入图片描述

下面提供CPU/MEM/Network/File system/System Disk监控的查询方式供大家参考：
[CPU_total_usage]
在这里插入图片描述

[MEM_usage]
在这里插入图片描述

[FS_usage]
在这里插入图片描述

[Netwok I/O]
在这里插入图片描述

[System Disk usage]
在这里插入图片描述

另外大家可以通过右上角的时间筛选框选择你想查看的时间段的资源消耗情况
在这里插入图片描述

Ennis.Zhou
关注
专栏目录
docker-compose 安装基于telegraf + influxdb + grafana监控系统
人生在勤,不索何获
03-19 2262
docker-compose 安装基于telegraf + influxdb + grafana监控系统 docker-compose.yml version: '3.7' services: influxdb: image: influxdb container_name: influxdb restart: always environment: - PRE_CREATE_DB=telegraf - ADMIN_USER="telegraf
centos7部署jmeter+grafana+telegraf+prometheus/influxdb，构建性能测试可视化实时监控（三）...
我是一言
07-18 634
性能监控之Telegraf+InfluxDB+Grafana服务器实时监控 目录性能监控之Telegraf+InfluxDB+Grafana服务器实时监控目标解决方案TelegrafTelegraf&InfluxDB集成InfluxDB下载安装安装要求网络端口网络时间协议(NTP)下载安装InfluxDB配置Telegraf下载安装配置Telegraf启动Telegraf查看数据Infl...
docker-telegraf
04-27
Telegraf作为Docker容器 该容器允许使用telegraf监视Docker主机（例如CoreOS系统）。 它作为特权容器运行，并且系统目录/proc/ ， /dev和/sys映射在容器的目录/host中。 代替修补telegraf以使用新路径来收集变量， 使用重新映射文​​件读取。 如何构建和运行 建立它： docker build -t 'telegraf' . 运行： docker run \ -v /proc:/host/proc \ -v /sys:/host/sys \ -v /dev:/host/dev \ -e TELEGRAF_INFLUX_DB_URL=http://influxdb.domain.com:1234 \ -e TELEGRAF_INFLUX_DB_NAME=grafana \ -e TELE
Telegraf+Influxdb+Grafana构建监控平台
weixin_34112030的博客
07-11 312
本文章为本人在ops内容建设团队第二期分享 欢迎关注微信公众号：OPS无界工程师 本文章最后更新时间：2018-05-13 个人博客地址：blog.sqdyy.cn 大家晚上好，今晚由我来分享基于telegraf+influxdb+grafana构建监控平台的方案，首先我们先来了解InfluxDB。influxdb是一款专为时序数据编写的高性能数据库，采用GO语言开发，并且开源！它是...
浅谈Telegraf+InfluxDB+Grafana快速搭建简易实时监控系统
热门推荐
老汉技术专栏
04-19 1万+
监控从来都是一个很宽泛的问题，任何可能出问题的地方都需要加入监控。全量监控的确是监控的终极目标。在搭建一套监控系统前，需要结合实际的系统情况和发展趋势进行考量。在作者看来，一套监控系统应主要由数据采集、数据存储、数据展示三部分构成。作者经过大量阅读相关资料后，最终选择了Telegraf+InfluxDB+Grafana这套方案。接下来，作者就对这套监控系统方案进行简要的介绍。 Telegraf+I...
Telegraf+InfluxDB+Grafana快速搭建实时监控系统 监控postgresql
weixin_33830216的博客
12-07 343
Telegraf+InfluxDB+Grafana快速搭建实时监控系统 监控postgresql 转载于:https://www.cnblogs.com/gaoyuechen/p/10081026.html
telegraf+influxdb+grafana开源监控架构
weixin_33735077的博客
11-05 155
telegraf+influxdb+grafana开源监控架构： telegraf监控项很全，不需要额外安装插件，很强大 可以通过telegraf监控在grafana面板显示单台服务器的uptime、CPU cores、总Mem、总空间等值，用grafana的Singlestat项显示（这个是icinga2监控做不到的） 如果telegraf和influ...
docker-statsd-influxdb-grafana, 带有 Telegraf ( StatsD )，InfluxDB和Grafana的Docker 映像.zip
09-18
docker-statsd-influxdb-grafana, 带有 Telegraf ( StatsD )，InfluxDB和Grafana的Docker 映像 带有 Telegraf ( StatsD )，InfluxDB和Grafana的 Docker 映像
Docker-Compose 轻松搭建 Grafana+InfluxDb 实用 Jmeter 监控面板
Free355的博客
07-21 1239
Grafana 和 InfluxDB 是两个非常流行的监控工具，它们可以帮助开发者对系统的性能和可用性进行实时监控。
Jmeter5.4+InfluxDB2.1+grafana8.0可视化监控平台搭建
xiaoxie777的博客
11-22 1274
Jmeter5.4+InfluxDB2.1+grafana8.0可视化监控平台搭建 文章目录Jmeter5.4+InfluxDB2.1+grafana8.0可视化监控平台搭建一、我们要做什么？二、我们为什么要做？三、我们在哪里做？四、我们怎么做？1、安装InfluxDB2.12、安装grafana8.03、Grafana中设置influxdb3、Jmeter5.4.1配置influxDB数据库后端处理器4、运行及结果展示五、参考文献 一、我们要做什么？ 1.本次我们来搭建Jmeter5.4+InfluxDB
telegraf-docker-sd:Telegraf Docker服务发现-自动配置Influxdata Telegraf Monitoring代理
05-14
移至GitLab： ://gitlab.com/davidhiendl/telegraf-docker-sd Telegraf Docker服务发现 telegraf-docker-sd是代理的轻量级（用GO编写）伴侣，旨在支持灵活的配置，以便检测和监视docker容器中运行的服务，而无需手动配置所需输入。 无需配置每个服务/容器，而是通过与容器匹配的模板生成配置，以动态构建配置。 这提供了极大的灵活性，并能够监视由编排框架（例如Swarm，K8Ns，...）动态创建的docker容器。 0.3.0-alpha版本 此版本是主要重构，并且重写后的目标是支持多个发现后端（kubernetes是WIP）。 仍然支持大多数功能，但是模板配置已更改，现在使用YAML文件通过嵌入式golang模板添加更多结构化数据。 配置示例 通过使用GO模板，可以在创建模板时获得极大的灵活性。 请参阅完整的
Telegraf+InfluxDB+Grafana大数据运维监控系统
大数据研习社
03-14 1889
了解详细内容扫一扫下面微信二维码
Telegraf+InfluxDB+Grafana 搭建服务器监控平台
DevOps海洋的渔夫@专栏
11-18 397
需求 近期需要搭建一套服务器性能数据监控平台，所以本次考虑基于Telegraf作为采集数据源的工具，集成使用influxdb存储数据，最后Grafana展示图表的方式，来建立这个监控平台。 监控平台拓扑 安装influxdb docker的安装说明： Centos7 下 InfluxDB 从安装开始到入门 宿主机直接安装说明： wget https://dl.in...
Telegraf+Influxdb+Grafana 轻量级监控系统部署
MineData
08-07 762
本方案中采用 数据存储（InfluxDB），数据采集（Telegraf），数据展示（Grafana ）。先简要介绍一下InfluxData这家公司。InfluxData是一家从事物联网设...
Telegraf+InfluxDB+Grafana实时运维监控
weixin_44328192的博客
09-07 2370
InfluxDB的下载、安装和使用；Grafana的下载、安装和使用；Telegraf的下载、安装和使用。Telegraf+InfluxDB+Grafana实现自动化运维监控大屏。
Telegraf+Influxdb+grafana 轻量级服务器监控
weixin_34205826的博客
11-09 256
Telegraf+Influxdb+grafana轻量级服务器监控 前言：公司要做监控，指定要用Grafana+Telegraf+Influxdb监控，研究了几天遇到了很多坑，在此记录下配置监控服务器的部署 一、创建存放软件目录##/sof...
Python 全栈系列267 telegraf、influxdb和grafana
最新发布
yukai08008的博客
09-05 1583
Telegraf 是一个灵活且功能强大的数据收集代理，通过其丰富的插件系统，可以从各种数据源收集数据并发送到多种目标系统。它的轻量级和高性能使其成为监控、日志管理、物联网数据收集等场景中的理想选择。尤其是与 InfluxDB 结合使用时，它可以组成一个强大的时序数据收集和分析系统。Prometheus更适合实时监控和报警，尤其在云原生和微服务架构下的监控非常流行。InfluxDB则是一个通用的时序数据库，适合需要持久化、复杂分析、事件和日志处理的场景。
docker搭建jmeter+influxdb+grafana
04-26
可以使用Docker Compose来搭建JMeter、InfluxDB和Grafana的组合。首先，在本地创建一个docker-compose.yml文件，然后输入以下内容： version: '3' services: jmeter: image: justb4/jmeter:5.1.1 ports: - ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值