spark双master解决单点问题

如果master异常退出,将导致 1、无法向spark集群提交任务 2、老任务即使运行结束,计算所占用的资源将无法释放,因为回收资源的指令是master发出的 解决方案: 思路:借鉴hadoop的SencondaryNameNode,设立备用master,当处于服务的master异...

2016-03-29 21:09:45

阅读数:1233

评论数:1

提示
确定要删除当前文章?
取消 删除
关闭
关闭