Linux上Flink安装及测试

一、下载Flink

1、手动下载Flink

1.1、官网下载:Flink安装包下载.
在这里插入图片描述
2.将flink安装包上传至linux
较为基础 上传方式略过
3.解压压缩包
在这里插入图片描述
3.1解压成功
在这里插入图片描述
4.启动kafka
在这里插入图片描述
进入kafka的bin目录
启动kafka:

start-cluster.sh

4.1查看是否启动成功
在这里插入图片描述
5.centos开放flink默认端口(8081) 修改iptables
进入配置iptables:

vi /etc/sysconfig/iptables

增加:

A INPUT -m state --state NEW -m tcp -p tcp --dport 8081 -j ACCEPT

在这里插入图片描述
5.1访问ui界面

http://192.168.100.201:8081/#/overview

ip地址可以根据自己服务器的ip更改
在这里插入图片描述
6.使用Flink跑一个简单的wordcount
6.1在同一个节点下复制三个会话窗口
在这里插入图片描述
6.2在第一个窗口打开一个终端(端口号随意指定)
在这里插入图片描述
命令:

nc -lk 9000

6.3到存放wordcoun的jar包下开启并指定9000端口(注意要与第一个会话窗口的端口一致)
在这里插入图片描述
命令:

进入flink:
cd /export/servers/flink-1.8.0/
运行wordcount  jar包并指定端口:
bin/flink run examples/streaming/SocketWindowWordCount.jar --port 9000

6.4打开第三个会话窗口
6.4.1进入flink的log目录
命令:

cd /export/servers/flink-1.8.0/log/

在这里插入图片描述
动态查看文件内容更新变化(可能是其他输出文件):
命令:

tail -f  flink-root-taskexecutor-0-node01.out

7.在第一个会话窗口随便输入内容
在这里插入图片描述
接着查看第三个窗口的文件内容
在这里插入图片描述
可以看出通过wordcount后已经对输入的内容进行了单词统计。
当然你也可以在ui界面查看当前运行任务:
在这里插入图片描述
结!

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要在Linux安装Flink,您可以按照以下步骤进行操作: 1. 首先,确保您的Linux系统已经安装了Java Development Kit(JDK)。您可以通过运行以下命令来检查是否已安装JDK: ``` java -version ``` 如果未安装JDK,请根据您的发行版文档或使用包管理器进行安装。 2. 接下来,您需要下载Flink的二进制发行版。您可以在Flink的官方网站(https://flink.apache.org/downloads.html)上找到最新的稳定版本。 3. 下载完成后,解压缩Flink的压缩包。您可以使用以下命令将其解压缩到您选择的目录中: ``` tar xzf flink-<version>.tgz ``` 4. 进入解压缩后的Flink目录: ``` cd flink-<version> ``` 5. 在Flink目录中,您将找到一个名为`conf`的子目录。在该目录中,复制默认配置文件: ``` cp flink-conf.yaml.template flink-conf.yaml ``` 6. 打开`flink-conf.yaml`文件,并根据您的需求进行配置。特别是,您可能需要修改以下属性: - `jobmanager.rpc.address`:设置Flink JobManager的RPC地址。 - `jobmanager.rpc.port`:设置Flink JobManager的RPC端口。 - `taskmanager.numberOfTaskSlots`:设置每个TaskManager的任务槽数量。 7. 保存并关闭`flink-conf.yaml`文件。 8. 现在,您可以启动Flink集群。在Flink目录中,运行以下命令: ``` ./bin/start-cluster.sh ``` 9. Flink集群启动后,您可以通过浏览器访问Flink的Web界面。默认情况下,它在`http://localhost:8081`上运行。 现在,您已成功在Linux安装Flink。您可以使用Flink的命令行工具或编写和提交Flink作业来开始使用它。有关更多详细信息,请参阅Flink的官方文档。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值