flink
vim_wj
这个作者很懒,什么都没留下…
展开
-
Flink入门教程--Task Lifecycle(任务的生命周期简介)
原文链接:https://ci.apache.org/projects/flink/flink-docs-release-1.3/internals/task_lifecycle.html#task-lifecycle-1 如有错误,请指正task是Flink中执行的基本单位,也是operator的每个并行实例被执行的地方。例如,并行度为5的operator ,其每个实例都由一个单独task执行。翻译 2017-09-13 19:42:49 · 3557 阅读 · 0 评论 -
Flink入门教程--File Systems(文件系统)
原文链接:https://ci.apache.org/projects/flink/flink-docs-release-1.3/internals/filesystems.html#file-systemsFlink通过org.apache.flink.core.fs.FileSystem类来抽象自己的文件系统,这个抽象提供了各类文件系统实现的通用操作和最低保证。此文件系统的可用操作非常有限,以支翻译 2017-09-14 15:20:27 · 5056 阅读 · 0 评论 -
Flink入门教程--Data Streaming Fault Tolerance(数据流容错)
Data Streaming Fault Tolerance(数据流容错)原谅链接:https://ci.apache.org/projects/flink/flink-docs-release-1.3/internals/stream_checkpointing.html#data-streaming-fault-toleranceIntroduceApache Flink 提供了可以恢复数据流应转载 2017-09-11 11:43:52 · 653 阅读 · 0 评论 -
Flink入门教程--Component Stack
作为一个软件解决方案,Flink是一个分层系统。不同层次之间彼此构建,并提高他们接受的程序表现的抽象级别:在Runtime 层中接受JobGraph形式的程序。JobGraph是一个具有消耗和产生数据流的任意通用并行数据流。DataStream API和DataSet API都能通过编译生成JobGraphs程序。DataSet API使用optimizer ,DataStream API使用s翻译 2017-09-11 11:28:51 · 571 阅读 · 0 评论 -
Flink入门教程--Jobs and Scheduling(任务和调度)
原谅链接:https://ci.apache.org/projects/flink/flink-docs-release-1.3/internals/job_scheduling.html#jobs-and-scheduling该文档简单描述了Flink是如何调度Job的,以及如何在JobManager上表现并跟踪Job状态。调度Flink通过任务槽(Task Slot)定义执行资源,每个TaskM翻译 2017-09-12 11:49:43 · 13593 阅读 · 3 评论