Spark Streaming 数据接受 导入到内存 生成Block的过程
1. 数据接受,生成Block 流程
streamingContext启动时,会启动ReceiverTracker, 它会将需要启动的Receiver分发到Executor上,Executor上的ReceiverSuperviser会负责Receiver的启动,停止,重启管理(后续有详细文章描述:如何分发,启动等)。
Receiver上的store(Item),实际调用ReceiverSupervi
原创
2016-01-05 17:57:34 ·
752 阅读 ·
0 评论