Flink集群安装部署
1:standalone模式
集群节点规划(一主两从)
hadoop100--master(JobManager)
hadoop101--slave(TaskManager)
hadoop102--slave(TaskManager)
基础环境:
jdk1.8及以上【需要配置JAVA_HOME】
ssh免密码登录(至少要实现主节点能够免密登录到从节点)
主机名hostname
/etc/hosts文件配置主机名和ip的映射关系
关闭防火墙
在hadoop100节点上主要需要修改的配置信息
cd /data/soft/flink-1.6.1/conf
vi flink-conf.yaml
jobmanager.rpc.address: hadoop100
vi slaves
hadoop101
hadoop102
然后再把修改好的flink目录拷贝到其他两个节点即可
scp -rq flink-1.6.1 hadoop101:/data/soft/
scp -rq flink-1.6.1 hadoop102:/data/soft/