java metrics 简书_flink Metrics及其使用

本文介绍了Flink的Metrics系统,包括Counter、Gauge、Histogram和Meter四种类型的指标,并通过示例展示了如何自定义监控指标,如在Kafka读取和写入中添加rps、dirtyData等指标信息。
摘要由CSDN通过智能技术生成

flink metric用来对外暴露系统内部的一些运行指标,比如flink框架运行时的JVM相关配置,或者基于flink开发的项目。

监控类型

flink提供了Counter, Gauge, Histogram and Meter四种类型的指标。我们通过继承RichFunction拿到MetricGroup,并向其中填充指标。

Counter:

用与存储数值类型,比如统计数据输入、输出总数量。

public class MyMapper extends RichMapFunction {

private transient Counter counter;

@Override

public void open(Configuration config) {

this.counter = getRuntimeContext()

.getMetricGroup()

.counter("myCounter");

}

@Override

public String map(String value) throws Exception {

this.counter.inc();

return value;

}

}

Gauge:

可以用来存储任何类型,前提要实现org.apache.flink.metrics.Gauge接口,重写getValue方法,如果返回类型为Object则该类需要重写toString方法。

有些场景下,需要根据业务计算出指标,则Gauge使用起来更灵活。

public class MyMapper extends RichMapFunction {

private transient int valueToExpose = 0;

@Override

public void open(Configuration config) {

getRuntimeContext()

.getMetricGroup()

.gauge("MyGauge", new Gauge() {

@Override

public Integer getValue() {

return valueToExpose;

}

});

}

@Override

public String map(String value) throws Exception {

valueToExpose++;

return value;

}

}

Meter:

用来计算平均速率,直接使用其子类MeterView更方便一些。

public class MyMapper extends RichMapFunction {

private transient Counter numInBytes;

private transient Meter meter;

@Override

public void open(Configuration config) {

this.meter = getRuntimeContext()

.getMetricGroup()

.meter("myMeter", new MeterView(numInBytes, 20))

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值