Flink 1.10.0 分布式安装 scala2.11

10.28.3.11 dockerapache-01 #flink master
10.28.3.12 dockerapache-02
10.28.3.13 dockerapache-03

  1. 下载安装包
    https://mirror.bit.edu.cn/apache/flink/flink-1.10.0/flink-1.10.0-bin-scala_2.11.tgz

  2. 上传至服务器flink的master节点上 并解压至【/usr/local】

以下在master节点上进行
  1. 配置环境变量
vim /etc/profile.d/flink.sh

export FLINK_HOME=/usr/local/hadoop-3.1.3
export PATH=$PATH:$JAVA_HOME/bin:$FLINK_HOME/bin:$FLINK_HOME/sbin

source /etc/profile 使配置生效

  1. 配置conf/master
vim masters

dockerapache-01:8081
  1. 配置conf/
vim slaves

dockerapache-02
dockerapache-03
  1. 配置flink-conf.yaml
    其中 jobmanager.rpc.address 是主要配置项,其他参考自行配置。
vim flink-conf.yaml

jobmanager.rpc.address: DockerApache-01
taskmanager.numberOfTaskSlots: 3
parallelism.default: 3
state.checkpoints.dir: hdfs://DockerApache-02:9000/flink/flink-checkpoints
rest.port: 8081
将flink安装包拷贝至其他节点
scp -r /usr/local/flink-1.10.0/ DockerApache-02:`pwd`
scp -r /usr/local/flink-1.10.0/ DockerApache-03:`pwd`

启动flink

[root@DockerApache-01 flink-1.10.0]# ./bin/start-cluster.sh
Starting cluster.
Starting standalonesession daemon on host DockerApache-01.
Starting taskexecutor daemon on host dockerapache-02.
Starting taskexecutor daemon on host dockerapache-03.

webui
http://10.28.3.11:8081/#/overview
在这里插入图片描述

©️2020 CSDN 皮肤主题: 游动-白 设计师:上身试试 返回首页