Flink
文章平均质量分 78
学习Flink的一些总结
程序员大魔王
努力学大数据的小菜鸟
展开
-
[Flink 实践篇-1] Flink 1.12.1 实现 WordCount 入门案例
什么是 WordCount ?wordcount 简单来讲就是单词计数,是一般大数据计算框架(Hadoop、Spark、Flink)的入门学习案例,相当于编程语言(Java、Python)中的 HelloWorld 案例,适合刚开始了解 Flink 作业提交流程的同学。环境要求JDK 1.8 (必须)~ $ java -versionjava version "1.8.0_291"Java(TM) SE Runtime Environment (build 1.8.0_291-b10)J原创 2021-06-18 22:29:57 · 2717 阅读 · 2 评论 -
Flink03-Flink运行架构第二节-Slot和并行度
由于本章节内容比较多,防止学习枯燥,分成了4节来写(点击标题可跳转, 持续更新ing)1-运行时的组件和基本原理2-Slot和并行度3-数据流和执行图4-任务调度控制文章目录什么是SlotSlot共享并行度与Slot的关系举例什么是SlotFlink 中每一个 worker(TaskManager)都是一个 JVM 进程,它可能会在独立的线程上执行一个或多个 subtask。为了...原创 2020-04-22 10:36:22 · 836 阅读 · 0 评论 -
Flink02-Flink运行架构第一节-运行时的组件和基本原理
文章目录1-Flink运行时的组件1)作业管理器(JobManager)2)任务管理器(TaskManager)3)资源管理器(ResourceManager)4)分发器(Dispatcher)2-任务提交流程3-任务调度原理1-Flink运行时的组件1)作业管理器(JobManager)2)任务管理器(TaskManager)3)资源管理器(ResourceManager)4)...原创 2020-04-22 09:14:18 · 260 阅读 · 0 评论 -
Flink01-一文搞懂为什么Flink会称为热门实时流数据处理框架
本文主要介绍流式处理系统的演变,从而引出Flink的原理以及Flink与SparkStreaming的不同点。方便新手进行理解和学习。原创 2020-04-20 13:54:46 · 2077 阅读 · 2 评论