Prometheus 概述
Prometheus(普罗米修斯)是一套开源的监控&报警&时间序列数据库的组合,起始是由SoundCloud公司开发的。随着发展,越来越多公司和组织接受采用Prometheus,社会也十分活跃,他们便将它独立成开源项目,并且有公司来运作。Google SRE的书内也曾提到跟他们BorgMon监控系统相似的实现是Prometheus。现在最常见的Kubernetes容器管理系统中,通常会搭配Prometheus进行监控。
Prometheus基本原理是通过HTTP协议周期性抓取被监控组件的状态,这样做的好处是任意组件只要提供HTTP接口就可以接入监控系统,不需要任何SDK或者其他的集成过程。这样做非常适合虚拟化环境比如VM或者Docker 。
Prometheus应该是为数不多的适合Docker、Mesos、Kubernetes环境的监控系统之一。输出被监控组件信息的HTTP接口被叫做exporter 。目前互联网公司常用的组件大部分都有exporter可以直接使用,比如Varnish、Haproxy、Nginx、MySQL、Linux 系统信息 (包括磁盘、内存、CPU、网络等等),具体支持的源看:https://github.com/prometheus
Prometheus的主要特点是:
多维数据模型(时序列数据由metric名和一组key/value组成)
在多维度上灵活的查询语言(PromQl)
不依赖分布式存储,单主节点工作.
通过基于HTTP的pull方式采集时序数据
可以通过push gateway进行时序列数据推送(pushing)
可以通过服务发现或者静态配置去获取要采集的目标服务器
多种可视化图表及仪表盘支持
Prometheus通过安装在远程机器上的exporter来收集监控数据,后面我们将使用到redies_exporter收集系统数据架构:
Grafana介绍
Grafana是一个跨平台的开源的度量分析和可视化工具,可以通过将采集的数据查询然后可视化的展示,并及时通知。它主要有以下六大特点:
1、展示方式:快速灵活的客户端图表,面板插件有许多不同方式的可视化指标和日志,官方库中具有丰富的仪表盘插件,比如热图、折线图、图表等多种展示方式;
2、数据源:Graphite,InfluxDB,OpenTSDB,Prometheus,Elasticsearch,CloudWatch和KairosDB等;
3、通知提醒:以可视方式定义最重要指标的警报规则,Grafana将不断计算并发送通知,在数据达到阈值时通过Slack、PagerDuty等获得通知;
4、混合展示:在同一图表中混合使用不同的数据源,可以基于每个查询指定数据源,甚至自定义数据源;
5、注释:使用来自不同数据源的丰富事件注释图表,将鼠标悬停在事件上会显示完整的事件元数据和标记;
6、过滤器:Ad-hoc过滤器允许动态创建新的键/值过滤器,这些过滤器会自动应用于使用该数据源的所有查询
效果
使用Grafana和Prometheus以及redis_exporter对redis节点进行监控。下面图监控某个redis节点:
安装
Redis_export下载并解压
下载地址:https://github.com/oliver006/redis_exporter
redis_exporter-v1.13.1.darwin-amd64.tar.gz
tar -zxvf redis_exporter-v1.13.1.darwin-amd64.tar.gz
使用默认配置
redis_exporter 常用的选项:
-redis.addr:指明一个或多个 Redis 节点的地址,多个节点使用逗号分隔,默认为 redis://localhost:6379
-redis.password:验证 Redis 时使用的密码;
-redis.file:包含一个或多个redis 节点的文件路径,每行一个节点,此选项与 -redis.addr 互斥。
-web.listen-address:监听的地址和端口,默认为 0.0.0.0:9121
启动单节点:
./redis_exporter redis//127.0.0.1:6379 &
启动多节点:
./redis_exporter -redis.addr xx.x.xxx.214:7000 xx.x.xxx:7001 xx.x.xxx.215:7002 xx.x.xxx.216:7003 &
Prometheus下载并解压
下载地址:https://prometheus.io/download
prometheus-2.22.2.darwin-amd64.tar.gz
tar -zxvf prometheus-2.22.2.darwin-amd64.tar.gz
prometheus.yml加入redis节点
-
job_name: redis
static_configs:
- targets: ['127.0.0.0:9121'] labels: instance: redis-mac
./prometheus
prometheus默认端口9090
ip+9090访问
Grafana下载并解压
下载地址:https://github.com/grafana/grafana
grafana-6.4.3.linux-amd64.tar.gz
tar -zxvf grafana-6.4.3.linux-amd64.tar.gz
启动
./bin/grafana-server 默认端口3000 默认用户名admin 密码 admin
ip+3000
- 第一步:
添加data sources - 第二步:
选择Prometheus - 第三步:
- 第四步:
- 第五步:
- 第六步:
- 第七步:
- 第八步:
- 第九步:
导入 查看
- 第十步:
最终结果页
- 第十一步: