mac下flink集群安装

838 篇文章 847 订阅 ¥99.90 ¥299.90
本文详细介绍了在Mac操作系统上安装和配置Flink集群的步骤,包括环境准备、SSH免密码登录、配置JAVA_HOME、安装Flink、配置Flink、启动Flink以及向集群添加JobManager和TaskManager实例。关键步骤包括生成SSH公钥实现免密登录,设置JAVA_HOME环境变量,配置Flink的flink-conf.yaml文件,以及启动和扩展JobManager和TaskManager。
摘要由CSDN通过智能技术生成

在这里插入图片描述

二 .集群运行

环境准备

Flink 运行在所有类 UNIX 环境上,例如 Linux、Mac OS X 和 Cygwin(对于Windows),而且要求集群由一个master节点和一个或多个worker节点组成。在安装系统之前,确保每台机器上都已经安装了下面的软件:

  • Java 1.7.x或更高版本
  • ssh(Flink的脚本会用到sshd来管理远程组件)

SSH免密码登录

译注:安装过Hadoop、Spark集群的用户应该对这段很熟悉,如果已经了解,可跳过。*

为了能够启动/停止远程主机上的进程,master节点需要能免密登录所有worker节点。最方便的方式就是使用ssh的公钥验证了。要安装公钥验证,首先以最终会运行Flink的用户登录master节点。所有的worker节点上也必须要有同样的用户(例如:使用相同用户名的用户)。本文会以 flink 用户为例。非常不建议使用 root 账户,这会有很多的安全问题。

当你用需要的用户登录了master节点,你就可以生成一对新的公钥/私钥。下面这段命令会在 ~/.ssh 目录下生成一对新的公钥/私钥。

ssh
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值