Flink源码剖析:flink-metrics-core

本文将详细介绍下flink中的指标核心模块,了解flink中定义的Metric类型,以及是如何分组组织Metric的。主要围绕flink源码中的flink-metrics-core模块展开。后面介绍下flink中的常见指标项。

1. flink-metrics-core

  1. Metric
    常见的指标类型有Gauge、Count、Meter、Histogram,flink 自定义了 Metric 类。
    Metric类图
图1:Metric类图
  1. MetricConfig
    存取flink指标相关配置的工具类,继承Properties,添加了直接读取string、int、long、float、double、boolean配置值的方法。
    MetricConfig类图
图2:MetricConfig类图
  1. MetricGroup
    Metric 在 flink 内部以 Group 的方式组织,有多层结构,Metric Group + Metric Name 是 Metric 的唯一标识。
TaskManagerMetricGroup
    •TaskManagerJobMetricGroup
        •TaskMetricGroup
            •TaskIOMetricGroup
            •OperatorMetricGroup
                •${User-defined Group} / ${User-defined Metrics}
                •OperatorIOMetricGroup
•JobManagerMetricGroup
    •JobManagerJobMetricGroup

可以根据需要埋点自定义指标:

  • 添加一个统计脏数据的指标,指标名为flink_taskmanager_job_task_operator_dtDirtyData :
// 从 RichFunction 中 getRuntimeContext() 
dirtyDataCounter = runtimeContext.getMetricGroup().counter
  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值