- 博客(3)
- 收藏
- 关注
原创 分布式(3):Kafka的常见考察知识点
上一章说了zookeeper,这一章来说一下使用它作集群管理与存储一些数据的kafka kafka与zookeeper的关系 kafka使用zookeeper来做集群管理,kafka集群中的每个broker节点会在zookeeper的节点目录上创建临时节点(/brokers/ids/N),同时kafka集群中的所有broker会向zookeeper上创建同一个临时节点,创建成功的broker节点...
2020-03-12 21:37:17 110
原创 分布式(2): Zookeeper
最近面试被分布式怼惨了,用过Zookeeper、Kafka、Elasticsearch却不知道深入原理,以后的学习中一定要不仅知其然还要知其所以然啊 Zookeeper 定位: 提供分布式协调服务,包括分布式锁、命名服务、配置管理、集群管理、队列管理(同步管理、生产者消费者) 数据模型: 类似于Linux文件系统的节点目录树,每个节点称作znode,存储了数据、访问权限、状态、子节点引用 zk的节...
2020-03-11 22:01:22 57
原创 分布式(1):一致性哈希
一致性哈希 场景 在对数据表做sharding时,若根据hash取模来决定存储分区,在水平扩展结点数量时,每条数据所属的分区会发生变化,需要进行大量的数据迁移,因此在扩展时一般扩展成2倍结点数量,避免数据的全量迁移 原理 一致性哈希采取哈希环的方式来决定存储分区,将各个存储结点哈希到环上,哈希环的范围 0 - 2^n - 1。对于数据进行相同的哈希,并沿顺时针存储到第一个哈希值比数据哈希值大的结点...
2020-03-04 23:17:18 131
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人