分布式
技术老虎Tiger
这个作者很懒,什么都没留下…
展开
-
笔记:hadoop的双NN机制
双namenode保证高可用,随之而来带来很多问题:1、2台namenode之间的数据同步问题,edits的数据。如果实时的同步,会造成client访问缓慢。如果批同步,会造成很多数据丢失。采取将数据edits抽取出来的方式。2、抽取出edits到第3方,也得考虑第3方的高可用,用edits集群的方式解决。底层依赖zookeeper。qjournal进程。3、2台namen...原创 2019-01-13 12:05:13 · 471 阅读 · 0 评论 -
CAP理论
C是一致性A是可用性P是分区容忍性。当分区发生时,系统仍然能提高服务。P理论上一定会发生的。因为网络时无法保证100%不出问题的。所以理论上只有CP、AP两种选择。1、CAP是理论,是忽略时延的。同机房几毫秒,异地机房几十毫秒。理论上无法做到,单一金额的分布式部署。但通过用户ID的hash分区,可实现整个系统的分布式部署。这样当发生故障,只是部分节点发生故障,提供系统可用性...原创 2019-01-14 13:52:46 · 169 阅读 · 0 评论