分布式理论--脑裂问题

以下一段话摘自《深入分布式缓存从原理到实践》：

主备是实现高可用的有效方式，但存在脑裂问题。脑裂（split-brain），指在一个高可用的系统中，当联系着的两个节点断开联系时，本来为一个整体的系统，分裂为两个独立节点，这时两个节点开始争抢共享资源，结果会导致系统混乱，数据损坏。

我们通过心跳检测做主备切换的时候，就存在不确定性。心跳检测的不确定性是发生脑裂问题的一个非常重要的原因。比如slave提供服务了，但此前被判死的master又复活了，还在继续工作，则对应用程序逻辑带来未知因素，其中就包括抢夺资源。

如何解决这个问题？

有一种做法称为“设置仲裁机制”。例如，设置第三方检测服务器monitor，当slave确定准备接管master时，让monitor也ping一下Master，如果没有通讯，在判断其“死亡”；同事master在对外服务时，每隔一段时间比如10s由master服务器ping slave服务器和monitor，如果均出现异常，则暂定业务操作，重试。重试多次之后则退出程序执行或者执行服务器重启操作。