说明
搭建Flink集群:
本实验拥有3个节点,均为CentOS 7系统,分别对应IP为10.211.55.11、10.211.55.13、10.211.55.14,且均有相同用户名 (本实验为 jiecxy)
为了方便,先在三台节点上 /etc/hosts 文件内容均添加:
10.211.55.11 master
10.211.55.13 worker1
10.211.55.14 worker2
一、 需先配置集群间ssh无密码登录
1. 过程为对每个节点,生成密钥对,然后将生成的所有公钥都追加 authorized_keys 文件中,再将authorized_keys文件放到每个节点 ~/.ssh/ 下
2. 在每个节点上生成密钥对,一路回车,生成密钥对:id_rsa 和 d_rsa.pub,默认存储在 /home/jiecxy/.ssh 下
# 例:在master节点上
# 生成密钥对
[jiecxy@master ~]$ ssh-keygen -t rsa -P ''
# 将 id_rsa.pub 追加到授权的key中
[jiecxy@master ~]$ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
3. 每个节点修改配置文件 /etc/ssh/sshd_config
# 例:在master节点上
[jiecxy@master ~]$ sudo vi /etc/ssh/sshd_config
修改内容如下:
...
RSAAuthentication yes # 启用 RSA 认证
...
PubkeyAuthentication yes # 启用公钥私钥配对认证方式
...
AuthorizedKeysFile .ssh/authorized_keys # 公钥文件路径

本文档详细介绍了如何在CentOS 7系统上搭建Flink standalone集群,包括配置集群间的SSH免密码登录和安装Flink的步骤。首先,通过生成和交换密钥对实现节点间的无密码登录,接着下载并解压Flink安装包,配置flink-conf.yaml及slaves文件,最后将Flink目录复制到所有工作节点,并通过运行wordcount例子进行测试。
最低0.47元/天 解锁文章
6752

被折叠的 条评论
为什么被折叠?



