flink在YARN上开启集群并提交作业

1、关闭flink集群(bin/stop-cluster.sh)stop-cluster.sh

2、开启hadoop分布式集群,包括hfds和yarn,以及分布式集群new-ha2和new-ha3

3、在xshell的new-ha2集群的flink目录下输入在yarn上开启flink集群的指令

开启成功后显示如下图所示,在浏览器输入出现的网址new-ha1:45888进去flink集群

 浏览器进入后, 在new-ha2输入提交作业的指令

bin/flink run -c com.atguigu.wc.StreamWordCount apps/FlinkTutorial-1.0-SNAPSHOT.jar -port 7777 -host new-ha1

输入结束后,回车键,查看flink集群的Running jobs如下图

 此时在new-ha1集群数入一些数据,比如hello world

此时flink的idea开发环境就会显示

在WEB UI的可视化界面TaskMannger 也能看到

点进去 后会出现

 此时在new-ha2集群ctrl c也没有关系,因为此时提交作业的过程和客户端已经没有关系了,已经提交上去之后,running JOBs肯定是可以运行的

这就是flink集群在yarn上开启并提交作业的过程

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值