Hadoop Metrics体系架构分析

本文深入剖析了Hadoop Metrics体系架构,详细介绍了MetricsUtil如何启动监控,ContextFactory如何根据配置文件创建Context,并通过Updater和Record进行数据更新与发送。Metrics的类型包括时间累积、时间值和时间率,数据通过context的定时任务进行更新和sink操作。
摘要由CSDN通过智能技术生成
转载请注明来自本空间:

本文基于Hadoop 0.20.XX版本分析,和现在的Metrics2稍有不同
1:概述
Hadoop Metrics用来统计集群运行数据,比如接口调用次数,响应时间,队列长度等等,现阶段(0.19版本)支持为数不多的几个层级的数据,分别是dfs,jvm,rpc,mepred等。这些数据收集之后可以sink(通过context)到不同的目的地,比如文件,ganglia,等,也可以自己实现一个context去sink这些数据到你指定的地方。
2:架构
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值