Flink1.8版本Standalone集群部署

节点

主节点：cdh1
从节点：cdh2、cdh3

ssh免密登入

分别在3台服务器上执行如下命令，生成对应的公钥、秘钥

ssh-keygen -t rsa

生成秘钥过程中，全部“回车”即可，过程如下

Generating public/private rsa key pair.
Enter file in which to save the key (/home/xhwl/.ssh/id_rsa): 
Enter passphrase (empty for no passphrase): 
Enter same passphrase again: 
Your identification has been saved in /home/xhwl/.ssh/id_rsa.
Your public key has been saved in /home/xhwl/.ssh/id_rsa.pub.
The key fingerprint is:
SHA256:Cmmcg2Nh4pgdmIs/zeVotkwmtKtWGZs11cbi/lI5O9c xhwl@cdh04
The key's randomart image is:
+---[RSA 2048]----+
|        o        |
| o     o +       |
|+ +   o o        |
|+* * = .         |
|=.* & + S .      |
| + @ * o +       |
|  * O o o o .    |
| . X . . + . E   |
|o.. o   . o      |
+----[SHA256]-----+

~/.ssh目录下生成对应秘钥：id_rsa为私钥，id_rsa.pub为公钥

-rw-------. 1 root root 1568 Jun 22 11:39 authorized_keys
-rw-------. 1 root root 1675 Jun 22 11:33 id_rsa
-rw-r--r--. 1 root root  392 Jun 22 11:33 id_rsa.pub
-rw-r--r--. 1 root root  536 Aug 29  2019 known_hosts

在cdh1上执行如下命令，添加公钥

ssh root@cdh01 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
ssh root@cdh02 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
ssh root@cdh03 cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

将公钥拷贝到cdh2、cdh3

scp -r ~/.ssh/authorized_keys root@cdh2:~/.ssh/
scp -r ~/.ssh/authorized_keys root@cdh3:~/.ssh/

验证是否配置成功，通过如下命令登入其他服务器（注：第一次登入可能需要输入一次密码）

ssh cdh2

安装Flink

在cdh1中

tar -zxvf flink-1.8.1-bin-scala_2.11.tgz

在 flink-1.8.1/conf/ 路径下，修改 flink-conf.yaml

# 修改为主节点
jobmanager.rpc.address: cdh1

在 flink-1.8.1/conf/ 路径下，修改 masters

cdh1:8081

在 flink-1.8.1/conf/ 路径下，修改 slaves

cdh2
cdh3

将安装好的Flink程序拷贝到cdh2、cdh3

scp -r /opt/apps/flink-1.8.1/ root@cdh2:/opt/apps
scp -r /opt/apps/flink-1.8.1/ root@cdh3:/opt/apps

配置环境变量

在cdh1上配置环境变量，然后拷贝到cdh2、cdh3（注：每个节点都需要source，刷新使之生效）

export FLINK_HOME=/opt/apps/flink-1.8.1
export PATH=$FLINK_HOME/bin:$PATH

启动集群

在flink-1.8.1/bin

./start-cluster.sh

查看是否启动成功
在主节点（cdh1），执行jps，有如下进程

21671 Jps
23992 StandaloneSessionClusterEntrypoint

在从节点（cdh2、cdh3），执行jps，有如下进程

18755 TaskManagerRunner
10520 Jps

浏览器登入cdh1:8081，可查看UI界面