分布式系统与一致性协议

分布式系统

集中式特点：1.单点问题；2.系统扩容-伸缩性问题；3.部署简单
分布式特点：

分布式系统是一个硬件或软件组件分布在不同的网络计算机上，彼此之间仅仅通过消息传递进行通信和协调的系统。 - 《分布式系统概念与设计》

1.分布性 - 多台计算机在空间上随意分布
2.对等性 - 没有主/从之分，副本(Replica)是分布式系统最常见的概念之一，指的是分布式系统对数据和服务提供的一种冗余方式。即分为：数据副本和服务副本
3.并发性
4.缺乏全局时钟 - 很难定义两个事件究竟谁先谁后
5.故障总是会发生

分布式环境的各种问题：
1.通信异常
从集中式向分布式演变的过程中，必然引入了网络因素，而由于网络本身的不可靠性，因此引入了额外的问题。
单机内存访问的延时在纳秒数量级（通常是10ns左右），而正常的一次网络通信延迟在0.1-1ms左右（100倍）。
2.网络分区 - 脑裂
在分布式系统中，不同节点分布在不同子网络（机房或异地网络）中，由于一些特殊原因导致这些子网络之间不连通，但各个子网络的内部网络是正常的，从而导致整个系统的网络环境被切分成若干个孤立的区域。
3.三态
分布式系统的每一次请求与响应，存在“三态”的概念，即：成功、失败、超时

一致性协议

在分布式系统中，每一个机器节点虽然都能够明确的知道自己在进行事务操作过程中的结果是成功或失败，但却无法直接获取其他分布式节点的操作结果。因此，当一个事务操作需要跨越多个分布式节点的时候，为了保持事务处理的ACID特性，就需要引入一个称为“协调者(Coordinator)”的组件来统一调度所有分布式节点的执行逻辑，这些被调度的分布式节点叫做“参与者(Participant)”。协调者负责调度参与者的行为，并最终决定这些参与者是否要把事务真正进行提交。基于这个思路，衍生出二阶段提交和三阶段提交两种协议。

2PC

2PC是Two-Phase Commit的缩写，即两阶段提交，是在数据库领域内，为了使基于分布式系统架构下的所有节点在进行事务处理过程中能够保持原子性和一致性而设计的一种算法。目前，绝大部分的关系数据库都是采用二阶段提交协议来完成分布式事务处理的。
协议说明
二阶段提交协议是将事务的提交过程分成了两个阶段来进行处理，其执行流程如下。
阶段一：提交事务请求 - preCommit
1.事务询问
协调者向所有的参与者发送事务内容，询问是否可以执行事务提交操作，并开始等待各参与者的响应
2.执行事务
各参与者节点执行事务操作，并将Undo和Redo信息记入事务日志中
3.各参与者向协调者反馈事务询问的响应
如果参与者成功执行了事务操作，那么就反馈给协调者Yes响应，表示事务可以执行；如果参与者没有成功执行事务，那么就反馈给协调者No响应，表示事务不可以执行。
由于上面描述的内容在形式上近似是协调者组织各参与者对一次事务操作的投票表态过程，因此二阶段提交协议的阶段一也被称为“投票阶段”，即各参与者投票表明是否要继续执行接下去的事务提交操作。
阶段二：执行事务提交
在阶段二中，协调者会根据各参与者的反馈情况来决定最终是否可以进行事务提交操作，正常情况下，包含以下两种可能。
执行事务提交
假如协调者从所有的参与者获得的反馈都是Yes响应，那么就会执行事务提交。
1.发送提交请求
协调者向所有参与者节点发出Commit请求
2.事务提交
参与者接收到Commit请求后，会正式执行事务提交操作，并在完成提交之后释放在整个事务执行期间占用的事务资源。
3.反馈事务提交结果
参与者在完成事务提交之后，向协调者发送Ack消息
4.完成事务
协调者接收到所有参与者反馈的Ack消息后，完成事务
中断事务
假如任何一个参与者向协调者反馈了No响应，或者在等待超时之后，协调者尚无法接收所有参与者的反馈响应，那么就会中断事务。
1.发送回滚请求
协调者向所有参与者节点发出Rollback请求
2.事务回滚
参与者接收到Rollback请求后，会利用其在阶段一中记录的Undo信息来执行事务回滚操作，并在完成回滚之后释放在整个事务执行期间占用的资源。
3.反馈事务回滚结果
参与者在完成事务回滚之后，向协调者发送Ack消息
4.中断事务
协调者接收到所有参与者反馈的Ack消息后，完成事务中
简单的讲，二阶段提交将一个事务处理过程分为了投票和执行两个阶段，其核心是对每个事务都采用先尝试后提交的处理方式，因此也可以将两阶段提交看做一个强一致性的算法

优缺点
二阶段提交协议的优点：原理简单，实现方便
二阶段提交协议的缺点：同步阻塞、单点问题、脑裂、太过保守

同步阻塞
二阶段提交协议存在的最明显也是最大的一个问题就是同步阻塞，这会极大的限制分布式系统的性能。在二阶段提交的执行过程中，所有参与该事务操作的逻辑都处于阻塞状态，也就是说，各个参与者在等待其他参与者响应的过程中，将无法进行其他操作。
单点问题
一旦协调者出现问题，整个二阶段提交流程将无法运转，更为严重的是，如果协调者是在阶段二中出现问题，那么其他参与者将会一直处于锁定事务资源的状态中，而无法继续完成事务操作。
数据不一致
在阶段二，即执行事务提交的时候，当协调者向所有参与者发送Commit请求之后，发送了局部网络异常或者是协调者在尚未发送完Commit请求之前自身发生了崩溃，导致最终只有部分参与者收到了Commit请求。于是，这部分收到了Commit请求的参与者就会进行事务提交，于是整个分布式系统便出现了事务不一致的现象。
太过保守
没有较为完善的容错机制，任意一个节点的失败都会导致整个事务的失败

3PC

是Three-Phase Commit的缩写，即三阶段提交，是2PC的改进版，形成了由CanCommit、PreCommit和doCommit三个阶段组成的事务处理协议

阶段一：CanCommit
1.事务询问
协调者向所有的参与者发送一个包含事务内容的canCommit请求，询问是否可以执行事务提交操作，并开发等待各参与者的响应。在询问的时候并不锁定资源，除非所有人都同意了，才开始锁资源
2.各参与者向协调者反馈事务询问的响应
参与者在接收到来自协调者的canCommit请求后，正常情况下，如果其自身认为可以顺利执行事务，那么会反馈Yes响应，并进入预备状态，否则反馈No响应。
阶段二：PreCommit
在阶段二中。协调者会根据各参与者的反馈情况来决定是否可以进行事务的PreCommit操作，正常情况下，包含两种可能。
执行事务预提交
假如协调者从所有的参与者获得的反馈都是Yes响应，那么就会执行事务预提交
1.发送预提交请求
协调者向所有参与者节点发出preCommit请求，并进入Prepared阶段
2.事务预提交
参与者接收到preCommit请求后，会执行事务操作，并将Undo和Redo信息记录到事务日志中
3.各参与者向协调者反馈事务执行的响应
如果参与者成功执行了事务操作，那么就会反馈给协调者Ack响应，同时等待最终的指令：提交或终止
中断事务
假如任何一个参与者向协调者反馈了No响应，或者在等待超时之后，协调者尚未法接收到所有参与者的反馈响应，那么就会中断事务
1.发送中断请求
协调者向所有的参与者节点发送abort请求
2.事务回滚
参与者接收到abort请求后，会利用其在阶段二中记录的Undo信息来执行事务回滚操作，并在完成回滚之后释放在整个事务执行期间占用的资源
3.反馈事务回滚结果
参与者在完成事务回滚之后，向协调者发送Ack消息
4.中断事务
协调者接收到所有参与者反馈的Ack消息后，中断事务
需要注意的是，一旦进入阶段三，可能会存在以下两种故障：
协调者出现问题
协调者和参与者之间的网络出现故障
无论出现哪种情况，最终都会导致参与者无法及时接收来自协调者的doCommit或者abort请求，针对这样的情况，参与者都会在等待超时之后，继续进行事务提交。
有缺点
三阶段提交协议的优点：相较于二阶段提交协议，三阶段提交协议最大的优点就是降低了参与者的阻塞范围，并且能够在出现单点故障后继续达成一致
三阶段提交协议的缺点：三阶段提交协议在去除阻塞的同时也引入了新的问题，那就是在参与者接收到preCommit消息后，如果网络出现分区，此时协调者所在的节点和参与者无法进行正常的网络通信，这种情况下，该参与者依然会进行事务的提交，这必然出现数据不一致

Paxos算法

是莱斯利 兰伯特于1990年提出的一种基于消息传递且具有高度容错特性的一致性算法，是目前公认的解决分布式系统中如何就某个值达成一致的问题最有效的算法之一。Paxos实际上是两阶段提交的一个优化，2PC/3PC都是分布式一致性算法的残次版本，Google Chubby的作者Mike Burrows说过这个世界上只有一种一致性算法，那就是Paxos，其它的算法都是残次品。

参考资源：
1.《从Paxos到ZooKeeper：分布式一致性原理与实践》