storm集群的容错机制

 

正常运行的Storm集群，如果nimbus、supervisor、worker出现挂机，会怎么样？

1、worker进程死亡

如果所运行的任务的worker进程死亡，supervisor会尝试重启worker进程，如果尝试多次后依然无法启动，那么nimbus会重新分配一个supervisor来执行该任务。

2、supervisor所在的机器宕机

如果supervisor所在的机器宕机，首先会将分配给该机器的任务暂停，并且nimbus会重新分配机器来执行该节点上的任务。

3、nimbus或supervisor进程死亡

在Storm设计中，nimbus和supervisor都是独立的进程，和执行业务逻辑的worker完全分离，那么，nimbus和supervisor的进程死亡，对于Storm任务而言，没有任何的影响。

只是，我们需要在服务中对nimbus和supervisor的进程进行运维监控，如果发现进程死亡，需要及时的进行再重启，否则无法增加新的任务。