博主新书：《大数据日知录：架构与算法》目录

《大数据日知录：架构与算法》目录

4目录编辑

第0 章 当谈论大数据时我们在谈什么................ 1

0.1 大数据是什么.......................... 2

0.2 大数据之翼：技术范型转换......................................... 4

0.3 大数据商业炼金术................................ 6

0.4 “大数据”在路上................................................... 7

第1 章 数据分片与路由.............................................. 9

1.1 抽象模型.......................................................10

1.2 哈希分片（Hash Partition） ..............................11

1.2.1 Round Robin....................................11

1.2.2 虚拟桶（Virtual Buckets） ..........................12

1.2.3 一致性哈希（Consistent Hashing） ...........................13

1.3 范围分片（Range Partition） ......................................18

参考文献......................................19

第2 章 数据复制与一致性................................................20

2.1 基本原则与设计理念............................21

2.1.1 原教旨CAP 主义..............................................21

2.1.2 CAP 重装上阵（CAP Reloaded）.............................23

2.1.3 ACID 原则...............................................24

2.1.4 BASE 原则.................................................24

2.1.5 CAP/ACID/BASE 三者的关系...........................25

2.1.6 幂等性（Idempotent）........................................26

2.2 一致性模型分类.................................................26

2.2.1 强一致性............................................27

2.2.2 最终一致性........................................28

2.2.3 因果一致性.............................28

2.2.4 “读你所写”一致性....................................29

2.2.5 会话一致性....................................29

2.2.6 单调读一致性..............................................30

2.2.7 单调写一致性.....................................................30

2.3 副本更新策略...........................30

2.3.1 同时更新..........................................30

2.3.2 主从式更新.....................................31

2.3.3 任意节点更新......................................32

2.4 一致性协议...........................................................32

2.4.1 两阶段提交协议（Two-Phrase Commit，2PC）..........................33

2.4.2 向量时钟（Vector Clock） ..............................38

2.4.3 RWN 协议.................................................40

2.4.4 Paxos 协议.............................................42

2.4.5 Raft 协议.............................................45

参考文献................................................49

第3 章 大数据常用的算法与数据结构....................................51

3.1 布隆过滤器（Bloom Filter） ............................51

3.1.1 基本原理.............................................52

3.1.2 误判率及相关计算..........................................52

3.1.3 改进：计数Bloom Filter....................................53

3.1.4 应用............................................54

3.2 SkipList............................................55

3.3 LSM 树........................................58

3.4 Merkle 哈希树（Merkle Hash Tree） .............................62

3.4.1 Merkle 树基本原理..................................................62

3.4.2 Dynamo 中的应用.........................................63

3.4.3 比特币中的应用..................................................63