- 博客(2)
- 收藏
- 关注
RSS订阅原创 Flink架构介绍
Flink架构作业管理器（JobManager）1、控制一个应用程序执行的主线程，也就是说，每个应用程序都会被一个不同的JobManager所控制执行。2、JobManager会先接收到要执行的应用程序，这个应用程序会包括：作业图（JobGraph）、逻辑数据流图（logical dataflow graph）和打包了所有的类、库和其他资源的JAR包。3、JobManager会把JobGraph转换成一个物理层面的数据流图，这个图被叫做“执行图”（ExecutionGraph），包含了所有可以并发执
2020-05-28 09:41:53
198
原创 Hadoop相关文档
Hadoop（HDFS）HDFS产出背景：随着数据量越来越大，在一个操作系统存不下所有的数据，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，迫切需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统。HDFS只是分布式文件管理系统中的一种。HDFS定义：HDFS，它是一个文件系统，用于存储文件，通过目录树来定位文件；其次，它是分布式的，由很多服务器联合起来实现其功能，...
2020-05-28 09:37:47
131
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人