naturaltao的博客

这里写自定义目录标题Flink简介Flink优势统一的批处理与流处理系统Flink简介Flink核心是一个流式的数据流执行引擎，其针对数据流的分布式计算提供了数据分布、数据通信以及容错机制等功能。基于流执行引擎，Flink提供了诸多更高抽象层的API以便用户编写分布式任务：DataSet API: 对静态数据进行批处理操作，支持Java、Scala和Python。DataStream API：对数据流进行流处理操作，支持Java和Scala。Table API：对结构化数据进行查询操作，将结构化

对于一个分布式系统来说，单个进程或是节点崩溃导致整个Job失败是经常发生的事情，在异常发生时不会丢失用户数据并能自动恢复才是分布式系统必须支持的特性之一。