Local本地模式
运行流程:
- Flink程序由JobClient进行提交
- JobClient将作业提交给JobManager
- JobManager负责协调资源分配和作业执行。资源分配完成后,任务将提交给相应的TaskManager
- TaskManager启动一个线程以开始执行。TaskManager会向JobManager报告状态更改,如开始执行,正在进行或已完成。
- 作业执行完成后,结果将发送回客户端(JobClient)
下载
https://mirrors.bfsu.edu.cn/apache/flink/flink-1.12.2/flink-1.12.2-bin-scala_2.12.tgz
上传至服务器并解压
解压:
tar -zxvf flink-1.12.2-bin-scala_2.12.tgz
赋予root权限
/usr/local/flink-1.12.2 是flink目录所在的绝对路径,根据自己情况更改
chown -R root:root /usr/local/flink-1.12.2
进入flink-1.12.2
目录
bin:此目录下为flink相关脚本 例如启动,停止脚本等
conf:flink配置目录。下边存放着flink相关配置
examples:flink 演示项目
启动Flink本地“集群”
进入flink解压目录下bin目录,运行脚本./start-cluster.sh
查看启动后进程
jps -l
页面访问
flink 启动后,默认端口为8081 ,访问时候只需要http://ip:8081即可
停止Flink命令
运行bin目录下的stop-cluster.sh
测试flink
使用examples/batch下的演示实例jar执行
准备文件
vim /root/words.txt
java scala php c++
java scala php
java scala
java
执行官方示例
使用bin目录下的flink脚本 运行指定的演示jar包 给定输入文件以及输出文件即可
./flink run /usr/local/flink-1.12.2/examples/batch/WordCount.jar --input /root/word.txt --output /root/count.txt
查看单词计数结果
如果,便证明flnk本地环境搭建OK了。