- 博客(2)
- 收藏
- 关注
原创 Flink源码流程(Yarn模式,k8s、local 、standalone 后续更新)
流程图地址 因为我的流程图画在飞书中的,所以我直接用飞书来共享。 好处是后期我更新,大家是可以直接看到的,希望对大家有帮助。 流程图中把 任务提交 涵盖了 以下 1、客户端 2、JobManager 3、TaskManager 比较适合大家一览的去了解整体源码流程,有一个总体的概念 细节点后面会慢慢开专题,全部来介绍 ...
2021-09-06 10:30:14 144
原创 使用 Docker 安装 Hadoop 集群
前言 相信大家都有过玩虚拟机的经验,也相信大家有想搭一个大数据集群偶尔在自己电脑上做做测试。使用虚拟机是可以完成的,但是过程非常漫长,而且很多操作不能以后重复使用。 这里我近期使用Docker完成了测试集群的搭建,我想用的时候,十几秒就可以直接启动,速度很快。而且所有的镜像都可以上传hub云端,想用的时候,从云端pull到任何一台有docker的电脑直接运行。 而且,以往我们使用虚拟机搭建集群,我们需要配置很多的免密,甚至Hadoop等文件,我们需要上传...
2021-07-06 17:54:40 1131
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人