Flink集群搭建

1、Flink下载，选择与hadoop、scala匹配的版本

2、解压，tar -zxvf flink-xxx.tar

tar -zxvf flink-6.2.tar  /home
cd /home
mv flink-6.2  flnk

3、配置flink-conf.yaml，主要配置一下几项：

#java路径
env.java.home：/home/java
#jobmanager rpc地址
jobmanager.rpc.address: mini1
#jobmanager rpc端口
jobmanager.rpc.port: 6123
#jobmanager 堆大小
jobmanager.heap.size: 512m
taskmanager.heap.size: 512m
#taskmanager solt个数
taskmanager.numberOfTaskSlots: 1
#默认并行度
parallelism.default: 1

6、配置masters文件,我这边没有配置高可用，所以只有一个master（mini1）

vi masters 


mini1:8081

7、配置slaves文件，将woker(我设置了三个woker:mini1、mini2、mini3)列表写入

vi  slaves

mini1
mini2
mini3

8、将flink复制到其他主机

scp -r /home/flink  root@mini2:/home/flink
scp -r /home/flink  root@mini3:/home/flink

9、进入flink web页面：http://mini1:8081,查看woker、master一切是否正常