![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
flink
文章平均质量分 81
Keozzz
JAVA EE 中间件
展开
-
Flink学习笔记(三)——监控维基百科编辑流
本文参考官方文档,使用flink 提供的API,在flink集群上运行流式分析。维基百科提供了一个IRC频道,对所有的wiki的编辑都会被记录下来。并计算每个用户在给定时间窗口内编辑的字节数。使用flink实现这个功能只需要几分钟,而且非常的简单,同时也为后面学习更复杂的程序打下基础。已上传至github: https://github.com/KeoZmy/wiki-flink.git原创 2018-01-11 17:57:53 · 2798 阅读 · 0 评论 -
flink学习笔记(一)——数据流编程模型
flink学习笔记(一)——数据流编程模型flink官方文档学习笔记,本文主要是flink一些基础概念数据流编程模型(Dataflow Programming Model)抽象等级(Levels of Abstraction)Flink提供不同级别的抽象来开发流/批处理应用程序。Statefule Stream Processing:是最低级别(底层)的抽象,只提供有状态的流。它通过Process原创 2018-01-03 18:20:49 · 3849 阅读 · 0 评论 -
flink学习笔记(二)分布式运行环境
flink学习笔记(二)分布式运行环境本文主要参考了flink官方文档以及一篇博客:http://wuchong.me/blog/2016/05/09/flink-internals-understanding-execution-resources/Task和Operator Chains对于分布式运行环境。为了更高效地分布式执行,Flink会尽可能地将operator的subt原创 2018-01-04 17:04:13 · 3073 阅读 · 1 评论