一、安装flink集群
1. 使用Xshell工具上传flink-1.14.0-bin-scala_2.12.tgz到/opt/software目录下。
2.在/opt/software目录下使用tar命令解压flink-1.14.0-bin-scala_2.12.tgz到/opt/module目录下:
tar -zxvf flink-1.14.0-bin-scala_2.12.tgz -C /opt/module/
3.在/opt/module目录下修改文件夹名称:
mv flink-1.14.0/ flink
4.打开环境变量:
vim /etc/profile
在底部添加如下配置:
#flink
export FLINK_HOME=/opt/module/flink
export PATH=$PATH:$FLINK_HOME/bin
5.将profile文件重新运行:
source /etc/profile
6.配置flink-conf.yaml
vim /opt/module/flink/conf/flink-conf.yaml
进行如下配置:
jobmanager.rpc.address: bigdata01
io.tmp.dirs: /opt/module/flink/tmp
7.创建临时目录:
mkdir -p /opt/module/flink/tmp
8.配置masters和workers:
vim /opt/module/flink/conf/masters
添加:bigdata01
vim /opt/module/flink/conf/workers
添加:
bigdata02
bigdata03
9.同步两个节点:
scp -r /opt/module/flink @bigdata02:/opt/module/
scp -r /opt/module/flink @bigdata03:/opt/module/
scp /etc/profile @bigdata02:/etc
scp /etc/profile @bigdata03:/etc
10.启动集群
start-cluster.sh
执行结果如下:
flink集群安装成功!