Flink_DataStream API 开发(入门案例)

最新推荐文章于 2024-08-09 11:28:10 发布

BigMoM1573

最新推荐文章于 2024-08-09 11:28:10 发布

阅读量269

点赞数

分类专栏： Flink 文章标签： Flink

本文链接：https://blog.csdn.net/qq_44509920/article/details/107443919

版权

本文介绍了Flink流处理程序的一般流程，包括获取执行环境、构建source、数据处理和sink。通过一个具体的例子展示了如何编写Flink程序来统计单词数量，从获取批处理运行环境，构建socket源，应用Flink操作进行单词统计，到最终的打印结果。读者将了解到如何在Linux环境中设置必要条件并实现简单的Flink流处理任务。

摘要由CSDN通过智能技术生成

文章目录

1.Flink 流处理程序的一般流程

1.Flink 流处理程序的一般流程

1)获取 Flink 流处理执行环境
2)构建 source
3)数据处理
4)构建 sink

示例
编写 Flink 程序，用来统计单词的数量。
步骤
1)获取 Flink 批处理运行环境
2)构建一个 socket 源
3)使用 flink 操作进行单词统计
4)打印

说明：如果 linux 上没有安装 nc 服务 ,使用 yum 安装

yum install -y nc

参考代码

package com.czxy.flink.stream

import org.apache.flink.api.java.tuple.Tuple
import org.apache.flink.streaming.api.scala.{
   DataStream, KeyedStream, StreamExecutionEnvironment, WindowedStream}
import org.ap