集群规划如下
JobManager | TaskManager | |
hadoop01 | y | y |
hadoop02 | n | y |
hadoop03 | n | y |
首先下载安装包
上传服务器并解压
解压到servers文件夹
配置环境变量
使环境变量起作用
修改Flink的配置文件
修改flink-conf.yml
注意:修改yml格式的配置文件时,key和value之间必须得有一个空格
修改masters文件
修改workes文件
指定hadoop配置目录
在环境变量配置文件中指定hadoop的配置目录
使配置文件生效
分发flink到其他主机
分发flink到hadoop002
分发flink到hadoop003
分发环境变量配置文件
使环境变量起作用
启动flink集群
jps查看进程
查看flink的webui
standalone集群的测试任务——单词计数
flink run examples/batch/WordCount.jar --input hdfs://hadoop001:9000/input/ --output hdfs://hadoop001:9000/output/result.txt
查看hdfs中的results.txt
查看单词计数结果