关注
分享
文章平均质量分 91
这个专栏主要来分享生产环境中 Flink 监控相关的实践,监控对于 Flink 任务来说是非常重要的,我们可以通过监控查看任务是否健康,也可以通过监控发送报警,及时发现任务的问题.
JasonLee实时计算
博主一直从事大数据开发的工作,工作经验非常丰富,目前主要专注于 Flink 实时计算领域,博客里面主要分享 spark 和 flink 的实战系列和源码分析的文章,欢迎交流和沟通,也欢迎关注我,希望和你一起学习,共同进步!
展开
-
【Flink 监控系列】Flink 自定义 kafka metrics reporter 上报 metrics 到 kafka
直接在 Flink Web UI 上面查看。通过 Flink 提供的 Metric Reporters 上报到外部系统，最终在 Grafana 上面展示。通过 Flink Rest API 接口查看。这三种方式各自有各自的使用场景，你可能会问，Flink 都已经提供了这么多种查看方式，那我们为什么还要自定义 kafka metrics reporter 呢？......原创 2022-08-04 21:08:37 · 1655 阅读 · 0 评论 -
【Flink 监控系列】Flink on yarn 任务实时监控最佳实践(Prometheus + Grafana)打造企业级监控方案
我们都知道 Flink 任务是一个 7*24 小时不停运行的任务,所以对于任务的实时监控就显得尤为重要,因为任务运行的状态对于我们来说是一个黑盒,比如任务是否挂掉,是否存在反压,使用的内存...原创 2021-08-08 19:14:14 · 3422 阅读 · 2 评论