- 博客(2)
- 收藏
- 关注
RSS订阅原创 HDFS Ozone的Pipeline实现机制
前言在现有HDFS中，每个副本块默认有3个副本，我们都知道这是为了容错而设计的。为了保持这3个副本的数据一致性，HDFS每次对数据进行写操作的时候，都是以Pipeline的方式进行更新。你可以理解为是一种流水线的方式：R1–>R2–>R3。中间如有一个环节出现问题，那么这次Pipeline更新就得重新来过。在HDFS对象存储服务Ozone中，同样会遇到多副本更新一致性的问题，所以它也需要有
2017-09-17 15:44:40
1807
原创 状态机在分布式系统中的应用
前言在大型的分布式系统中，经常会涉及到状态的改变，这里的状态变化可以分很多种，最极端的情况是，任何状态之间都可以互相切换。这种状态之间的切换，转变，更加官方一点的称为叫状态机。这个词可能很多人会感到比较陌生，英文就是State Machine。所以如果大家在学习开源项目中，看到这个单词，指的就是状态机的意思。那么状态机有什么用途呢，为什么我们要定义这样一个概念呢？本文笔者就来简单聊聊状态机的管理。状
2017-09-10 15:58:09
7017
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人