- 博客(1)
- 资源 (11)
- 收藏
- 关注
原创 SparkSteaming运行流程分析以及CheckPoint操作
本文主要通过源码来了解SparkStreaming程序从任务生成到任务完成整个执行流程以及中间伴随的checkpoint操作注:下面源码只贴出跟分析内容有关的代码,其他省略1 分析流程应用程序入口:val sparkConf = new SparkConf().setAppName("SparkStreaming")val sc = new SparkContext(spar...
2018-02-23 19:34:38 879
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人