guo_bigdata的博客

原创 Flink笔记1-简介概述

1.流计算基础概念1.1 Dataflow图 Dataflow程序描述了数据如何在不同操作之间流动。Dataflow程序通常表示为有向图。图中顶点为算子，表示计算；而边表示数据依赖关系。算子 是Dataflow程序的基本单元，它们从输入获取数据，对其进行计算，然后产生数据并发往输出以供后续处理。没有输入端的算子成为数据源，没有出 输出端的算子称为数据汇。一个DataFlow图至少有一个数据源和一个数据汇。1.2 数据并行和任务并行将输入数据分组，让同一操作的多个任务并行执行在不同数据子集上，.