linux的flink安装使用

最新推荐文章于 2024-08-13 15:05:05 发布

忧伤的橘子

最新推荐文章于 2024-08-13 15:05:05 发布

阅读量1.2k

点赞数

文章标签： flink

本文链接：https://blog.csdn.net/qq_45255036/article/details/105265392

版权

本文详细介绍了如何在Linux系统上安装Flink 1.7.2，并进行集群配置。首先解压安装包，修改配置文件flink-conf.yaml和slaves，然后将文件分发到多台机器。接着，通过Maven开发Flink流处理程序WordCount，指导在IDEA上和Linux上运行，包括添加运行参数和打包上传。最后，提供了两种在Linux上运行Flink程序的方法，包括通过Web UI和命令行方式，并强调在运行前需启动nc -lk 9999服务。

摘要由CSDN通过智能技术生成

一.linux

1.Linux安装

解压缩 flink-1.7.2-bin-hadoop27-scala_2.11.tgz，进入conf目录中

1）修改 flink/conf/flink-conf.yaml 文件：

jobmanager.rpc.address: spark01

(2)修改 /conf/slave文件：

spark02
spark03

(3)分发两台机器

scp -r flink-1.7.2/ root@spark02:/opt/
scp -r flink-1.7.2/ root@spark03:/opt/

二.maven开发flink

(1)导入依赖和导包插件

<dependencies>
        <dependency>
            <groupId>org.apache.flink</groupId>
            <artifactId>flink-scala_2.11</artifactId>
            <version>1.7.2</version>
        </dependency>
        <!-- https://mvnrepository.com/artifact/org.apache.flink/flink-streaming-scala -->
        <dependency>
            <groupId>org.apache.flink</groupId>
            <artifactId>flink-streaming-scala_2.11</artifactId>
            <version>1.7.2