敏捷研发之持续监控

一、ELG简介

Elasticsearch是个开源分布式搜索引擎，提供搜集、分析、存储数据三大功能。它的特点是分布式、零配置，自动发现、索引自动分片、索引副本机制，restful风格接口，多数据源、自动搜索负载等。至少部署3个节点

Logstash主要用来日志的搜集、分析、过滤日志的工具，支持大量的数据获取方式。一般工作方式为c/s架构，client端安装在需要手机日志的主机上，server端负责将收到的各节点日志进行过滤、修改等操作在一并发往elasticsearch上去。

Grafana是一个开源的度量分析与可视化套件。纯JS开发的前端工具，通过访问库展示自定义报表、显示图表等。大多使用时序数据的监控方面，同Kibana类似。Grafana的UI更加灵活，有丰富的插件，功能强大。

数据采集

• WireData

• filebeat

• Metrics

• Windows Envents

二、grafana看板实现服务器指标监控

Zabbix+Grafana实现非容器化主机监控告警；

ELK+Grafana实现非容器化服务与日志监控告警；

Prometheus+Grafana实现容器化主机与pod服务监控告警；

通过zabbix配置主机告警，实现主机探活，磁盘、CPU、内存、网络等异常告警；

日志埋点告警：通过收集日志，匹配错误码告警；

接口探活告警：通过调用http接口，判断返回码，如返回异常，触发告警；