FLink学习笔记:01-Flink集群搭建

集群规划

机器名称IP角色
k8s-node3192.168.0.52master
k8s-node5192.168.0.52slave
k8s-node8192.168.0.52slave

1、下载安装包

下载对应scala版本的flink,1.14支持hadoop2.X以上的版本

在K8s-node3服务器上执行操作:

wget https://dlcdn.apache.org/flink/flink-1.14.4/flink-1.14.4-bin-scala_2.12.tgz

2、解压文件

[root@k8s-node3 software]# tar -xzvf flink-1.14.4-bin-scala_2.12.tgz 

3.配置Flink

masters文件

k8s-node3:8081

workers

k8s-node5
k8s-node8

flink-conf.yaml

jobmanager.rpc.address: k8s-node3

# The RPC port where the JobManager is reachable.

jobmanager.rpc.port: 6123

环境变量

新建/etc/profile.d/flink.sh文件:

export FLINK_HOME=/home/software/flink-1.14.4
export PATH=$FLINK_HOME/bin/:$PATH

source /etc/profile.d/flink.sh 使得环境变量生效

启动集群

[root@k8s-node3 bin]# ./start-cluster.sh 
Starting cluster.
Starting standalonesession daemon on host k8s-node3.
Starting taskexecutor daemon on host k8s-node5.
Starting taskexecutor daemon on host k8s-node8.

在浏览器输入http://192.168.0.52:8081,就可以进入到Flink的Web管理界面

#Flink官方文档:
https://nightlies.apache.org/flink/flink-docs-release-1.14/zh/docs/dev/datastream/execution_mode/

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值