![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
flink
文章平均质量分 65
weixin_52116589
这个作者很懒,什么都没留下…
展开
-
flink知识点总结(未完待续。。。。)
1、flink编程模型1)抽象数据集DataStream(实时):使用StreamExecutionEnvironment创建DataStreamDataSet(离线): 使用ExecutionEnvironment创建DataSet2)编程模型Source:从指定的数据源创建最原始的抽象数据集Transformation:对数据集进行转换操作,返回一个新的数据集Sink:将数据输出到指定的存储系统中注意:job中必须有source和sink,Transformation可有可无2、sou原创 2021-05-21 22:21:43 · 463 阅读 · 0 评论 -
KafkaToKafkaExactlyOnce,记录Kafka读取数据再写到Kafka中并且要保证exactly-once
记录一下:从Kafka读取数据再写到Kafka中并且要保证exactly-once案例public class KafkaToKafkaExactlyOnceDemo { public static void main(String[] args) throws Exception { //创建一个执行环境 StreamExecutionEnvironment env = StreamExecutionEnvironment .createLoca原创 2021-05-20 23:18:42 · 144 阅读 · 0 评论