flink 怎么根据 jobName获取 jobId

最新推荐文章于 2024-04-30 10:07:56 发布
最新推荐文章于 2024-04-30 10:07:56 发布
阅读量6.4k 收藏 8
点赞数
分类专栏： flink 文章标签： flink jobName jobId overview 监控
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cll611/article/details/104100730
版权

本文为原创，转载请注明出处！

这是一个看起来很简单的事，但是在网上查了好久都没有答案。觉得好奇怪。这个看似简单的问题，官方竟然没有对应的方法？

兜兜转转，后来转念想，没有直接的方法的话，那我可以获取到所有的job信息吗？

这样一查之后，就有结果了。

flink官方提供了一套监控系统的rest API，可以查到job的所有信息。

还是那句话，要好好看官方文档啊！

http://127.0.0.1:8081/jobs/overview

这我不就可以根据jobname查jobId了吗~···

官方文档：https://ci.apache.org/projects/flink/flink-docs-release-1.9/monitoring/rest_api.html

本文为原创，转载请注明出处！

初楚凌
关注
  • 0
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Apache Flink Job执行流程.pdf
07-17
Flink 2019峰会 阿里大牛的技术分享， 在线教程有github，第12个文档 简明扼要的讲解Flink的job运行原理和源码分析。值得收藏
flink指定jobid
路过君的博客
05-31 2199
版本 flink 1.14.4 方法 Configuration configuration = new Configuration(); configuration.setString(PipelineOptionsInternal.PIPELINE_FIXED_JOB_ID, "xxx"); StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(configuration); 源码分析 o
Flink流批一体计算（8）：Flink常见Shell命令
victory0508的专栏
06-28 1384
Flink提供了一个命令行界面（CLI）bin/Flink，用于运行打包为JAR文件的程序并控制其执行。CLI是任何Flink设置的一部分，可在本地单节点设置和分布式设置中使用。它连接到conf/flink-conf.yaml中指定的正在运行的JobManager。操作用途使用启动一个常驻的Flink集群，接受来自客户端提交的任务。run提交Flink作业，作业既可以被提交到一个常驻的Flink集群上，也可以使用单机模式运行。以模式执行作业。info用于打印作业的优化执行图。
flink笔记4 flink在local模式下两种提交job的方法
weixin_43631997的博客
04-08 1609
目录 1.网页 1.1自己的流处理程序 1.网页 1.1自己的流处理程序 import org.apache.flink.api.java.utils.ParameterTool import org.apache.flink.streaming.api.scala.{StreamExecutionEnvironment, createTypeInformation} object StreamWordCount { def main(args: Array[String]): U.
Flink部署——命令行界面
京河小蚁的博客
06-26 1515
Flink 提供了一个命令行界面 （CLI） bin/flink 来运行打包为 JAR 文件的程序并控制其执行。CLI 是任何 Flink 设置的一部分，可在本地单节点设置和分布式设置中使用。它连接到在conf/flink-conf.yaml中指定的正在运行的JobManager。本节中列出的命令工作的先决条件是运行 Flink 部署，如 Kubernetes、YARN 或任何其他可用的选项。您可以随意在本地启动 Flink 集群，在您自己的机器上尝试这些命令。提交作业意味着将作业的 JAR 和相关依赖项上
实践数据湖iceberg 第二十九课 如何优雅高效获取flink的jobId
spark_dev的博客
04-15 2656
提交一个flink作业，希望获取这个作业的jobId,以便后续程序监控，例如获取checkpoint路径，从checkpoint点重启
【FlinkX】两个issue分析:reader和writer的通道数不一致+获取JobId
一只皮皮熊
03-19 619
文章目录issue详情reader和writer的通道数不一致获取JobId代码分析#issue145配置说明源码分析:#issue148 最近准备再花点时间优化一下之前的FlinkX版本，特地去看了一下项目的issues区域，发现两个自己比较关注的issue。 issue详情 reader和writer的通道数不一致 异构数据源reader和writer设置不同的Parallelism数#...
flink java提交任务，根据jobname获取jobid，rest获取任务的状态
热门推荐
不是一枚开发
08-03 7万+
1.传入jobname: public class ReduceDemo { public static void main(String[] args) throws Exception { StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); DataStreamSource<String> words = env.socketT
Flink-跟着问题读源码：提交作业时未返回yarn applicationId
三石
08-17 1057
问题描述 在公司做flink实时计算平台时，需要将flink jar提交到yarn上后获取applicationId，以此来处理后续的状态控制。但是在升级flink1.9.0到flink1.10.1后，突然无法从日志中解析得到applicationId了。 方案 很有意思，最后验证表明，服务端日志和客户端日志可以采用两套日志体系，首先client代码我们公司都是使用logback的，于是，当 1、Server端为logback时，即/lib下的包为logback-classic-1.2.3.jar、logb
【Flink】通过REST API监控正在运行的作业状态和统计信息
qq_43744420的博客
08-10 1631
通过REST API监控正在运行的作业状态和统计信息
flink-sql集成rabbitmq
06-29
flink-sql集成rabbitmq
Flink-1.16.2 CDH6.3.2
09-26
CDH6.3.2集成安装Flink-1.16.2，所需的包都在文件里面了，不用再自己打包了 参考部署教程： https://blog.csdn.net/qq_31454379/article/details/110440037 https://www.cnblogs.com/lshan/p/16469294.html
Flink Phoenix connector依赖包
06-02
flink sql读写phoenix所使用到的连接器依赖包： flink-sql-connector-phoenix-1.14-1.0.jar 使用示例： create table tab2( ID STRING, NAME STRING, PRIMARY KEY (ID) NOT ENFORCED )WITH( 'connector' = '...
flink 1.15.0安装包
05-06
flink 1.15.0安装包
Flink学习（九）-jar 包提交给 flink 集群执行
a80C51的博客
04-25 372
执行后，依旧在浏览器的 webUI 中，看相关信息即可。在命令行中，在flink 的安装目录下，执行。
垃圾的flinkcdc
青春不流名
04-28 295
MySQL 默认是大小写不敏感的，使用反引号可以强制 MySQL 将表名或字段名视为区分大小写。如果不使用反引号，MySQL 将自动将表名和字段名转换为小写。: 使用反引号可以避免使用MySQL的保留字和关键字作为表名或字段名时产生的冲突。比如，你可以创建一个名为。虽然使用反引号有一定的好处，但过度使用也会增加代码的复杂性，一般来说，只有在必要的情况下才使用反引号。都将被视为大小写敏感的，而不会被转换为小写。
9、Flink 用户自定义 Functions 及 累加器详解
最新发布
猫猫爱吃小鱼粮
04-30 481
Flink 用户自定义 Functions 及 累加器详解
pyflink 设置流批模式
zhaoyangjian724的专栏
04-24 273
import reimport sys。
pyflink 读取excel
zhaoyangjian724的专栏
04-27 307
import sysds.print()
flink 多job
10-27
而且，Flink的任务调度器可以根据资源的情况，自动分配和调度不同的Job，充分利用集群的资源，提高整体的吞吐量。 此外，Flink的多Job能够实现数据的流式处理和批处理的混合使用。可以将不同类型的Job组合在一起，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值