flink
文章平均质量分 94
小钻风巡山
咸鱼即将翻身
展开
-
Flink 窗口函数与聚合
Flink可以对数据进行分段计算.类似于批处理,批的概念相当于一段时间内的数据,窗口定义了时间的范围窗口函数代码//Time.seconds(2)表示窗口时间范围为2秒 Time.seconds(1) 表示窗口时间跨度为1秒data.timeWindow(Time.seconds(2), Time.seconds(1));时间窗口长度为2秒,两次执行的时间跨度为1秒...原创 2020-07-23 15:22:05 · 757 阅读 · 0 评论 -
Flink 流式计算 source与sink
获取各种源的DataStream1.获取nc数据源 /** * 获取端口9999的数据 需要先启动nc (执行命令 nc -l -p 9999),否则显示连接拒绝 * * @param env * @return */ private static DataStream<String> getDataNC(StreamExecutionEnvironment env) { DataStreamSourc..原创 2020-07-23 14:05:52 · 919 阅读 · 0 评论 -
Flink流式计算 单词统计程序与任务管理
1.首先安装nc用于制造实时数据下载地址https://eternallybored.org/misc/netcat/360会提示这个文件有病毒,会自动隔离这个文件,恢复文件后才能通过端口发送实时数据,恢复后解压文件2.启动nc没有配置环境可以直接指定nc.exe直接启动nc发送数据配置过环境变量使用直接使用nc启动3. 编写flink代码pom坐标 <dependencies> <dependency>...原创 2020-07-22 15:08:37 · 703 阅读 · 0 评论