![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flink
文章平均质量分 70
Hi洛一
Talk is cheap.Show me the code
展开
-
Flink 离线处理案例
Dataset是flink的常用程序,数据集通过source进行初始化,例如读取文件或者序列化集合,然后通过transformation(filtering、mapping、joining、grouping)将数据集转成,然后通过sink进行存储,既可以写入hdfs这种分布式文件系统,也可以打印控制台,flink可以有很多种运行方式,如local、flink集群、yarn等.scala版本:...转载 2020-03-24 21:52:25 · 2195 阅读 · 0 评论 -
Flink的水印机制
一.Flink流处理时间方式 :EventTime[事件时间] 事件发生的时间,例如:点击网站上的某个链接的时间IngestionTime[摄入时间] 某个Flink节点的source operator接收到数据的时间,例如:某个source消费到kafka中的数据ProcessingTime[处理时间] 某个Flink节点执行某个operation的时间,例如:timeWindow接...原创 2019-12-26 15:44:04 · 2442 阅读 · 1 评论 -
Flink_Day01Flink基础介绍
今日收获:原创 2019-12-24 22:55:45 · 111 阅读 · 0 评论