【大数据】Flink1.7.0
【大数据】Flink1.7.0
北京小辉
余辉,硕士毕业于中科院,从事IT行业12年。专注于大数据、云数据、用户画像、推荐算法。在数据团队担任过的角色:研发、架构师、负责人、讲师。数据知识产权:出版大数据书籍【1】本,论文【2】篇,软著【6】篇,专利【65】篇。
展开
-
Flink-数据流编程模型
目录:1、抽象等级2、程序和数据流3、并行数据流4、窗口5、时间6、状态操作7、容错检查点8、批处理流1、抽象等级       Flink提供了不同级别的抽象来开发流/翻译 2018-09-27 12:45:16 · 18026 阅读 · 0 评论 -
Flink-分布式运行环境
转载请标明出处: https://blog.csdn.net/silentwolfyh目录:1、任务和操作链2、job管理, Task管理,客户端3、任务槽和资源4、后端状态5、保存点1、任务和操作链 对于分布式执行,Flink将操作子任务链接到一起,形成任务。每个任务由一个线程执行。将链接操作符放入任务中是一个有用的最优化:...翻译 2018-09-27 16:03:16 · 955 阅读 · 0 评论 -
Flink Job上传的jar包保存在哪里
通过 flink UI dashboard提交的 jar 存储在哪个目录下? 一直都有疑惑,之前没做深入的了解,这个问题不解决感觉心里总在惦记着。今天就跟我一起来探寻一下其中的套路吧。 Google大法好 找到了一条关于 Flink Up...原创 2019-09-12 16:29:58 · 5705 阅读 · 0 评论 -
Flink在kafka中Exactly-Once原理解说
翻译来源:Apache Flink中的端到端完全一次处理概述(与Apache Kafka一样!)Apache Flink中的端到端完全一次处理概述(与Apache Kafka一样!)2018年3月1日Piotr Nowojski(@PiotrNowojski)和Mike Winters(@wints)这篇文章改编自2010年Flink Forward Berlin的Piotr Nowojsk...翻译 2019-09-19 14:13:37 · 3231 阅读 · 1 评论