分布式监控数据采集系统Ganglia实战

最新推荐文章于 2024-09-27 00:03:07 发布

Java后端架构V

最新推荐文章于 2024-09-27 00:03:07 发布

阅读量1.3k

点赞数

分类专栏：架构分布式文章标签： java 架构编程语言

本文链接：https://blog.csdn.net/pisa8559/article/details/110904080

版权

Ganglia是一款强大的分布式监控系统，专为HPC集群设计，具备良好扩展性和低负载。它由gmond、gmetad和webfrontend组成，gmond收集节点信息，gmetad汇总数据，webfrontend提供可视化界面。Ganglia支持单播和多播模式，数据以XML格式在gmond和gmetad间传输。安装Ganglia可通过yum或源码，配置涉及gmetad.conf和gmond.conf文件。完成安装后，启动gmond和gmetad服务，通过Web界面查看监控数据。

摘要由CSDN通过智能技术生成

一、什么是Ganglia

对于这个工具，大家可能比较陌生，但是它功能非常强大，如果我们想收集所有服务器、网络设备的数据，那么ganglia绝对是首选，在深入学习之前，还是先从基础概念了解起吧！

Ganglia是一款为HPC（高性能计算）集群而设计的可扩展的分布式监控系统，它可以监视和显示集群中的节点的各种状态信息，它由运行在各个节点上的gmond守护进程来采集CPU 、内存、硬盘利用率、I/O负载、网络流量情况等方面的数据，然后汇总到gmetad守护进程下，使用rrdtool存储数据，最后将历史数据以曲线方式通过PHP页面呈现。

Ganglia的特点如下：

良好的扩展性，分层架构设计能够适应大规模服务器集群的需要

负载开销低，支持高并发

广泛支持各种操作系统（UNIX等）和cpu架构，支持虚拟机

二、Ganglia的组成

Ganglia监控系统有三部分组成，分别是gmond、gmetad、webfrontend，作用如下。

gmond: 即为ganglia monitoring daemon，是一个守护进程，运行在每一个需要监测的节点上，用于收集本节点的信息并发送到其他节点，同时也接收其他节点发过了的数据，默认的监听端口为8649。

gmetad: 即为ganglia meta daemon，是一个守护进程，运行在一个数据汇聚节点上，定期检查每个监测节点的gmond进程并从那里获取数据，然后将数据指标存储在本地RRD存储引擎中。

webfrontend: 是一个基于web的图形化监控界面，需要和Gmetad安装在同一个节点上，它从gmetad取数据，并且读取RRD数据库，通过rrdtool生成图表，用于前台展示，界面美观、丰富，功能强大。

下图是一个简单的Ganglia监控系统结构图。

从图中可以看出，一个Ganglia监控系统是由多个gmond进程和一个主gmetad进程组成，所有gmond进程将收集到的监控数据汇总到gmetad管理端，而gmetad将数据存储到RRD数据库中，最后通过PHP程序在Web界面进行展示。

这是最简单的Ganglia运行结构图，在复杂的网络环境下，还有更复杂的Gnaglia监控架构。下图是Ganglia的另一种分布式监控架构图。

从这个图中可以看出，gmond可以等待gmetad将监控数据收集走，也可以将监控数据交给其它gmond，进而让其他gmond将数据最终交付给gmetad，同时，gmetad也可以收集其他gmetad的数据.比如，对于上图中的Cluster1和Cluster2集群，Cluster2就是一个gmetad，它将自身收集到的数据又一次的传输给了Cluster1集群；而Cluster1将所有集群的数据进行汇总，然后通过Web进行统一展现。