分布式系统
文章平均质量分 88
技术无远弗届
技术为业务服务
展开
-
一致性哈希算法与Java实现
一致性哈希算法是分布式系统中常用的算法。比如,一个分布式的存储系统,要将数据存储到具体的节点上,如果采用普通的hash方法,将数据映射到具体的节点上,如key%N,key是数据的key,N是机器节点数,如果有一个机器加入或退出这个集群,则所有的数据映射都无效了,如果是持久化存储则要做数据迁移,如果是分布式缓存,则其他缓存就失效了。 因此,引入了一致性哈希算法:把数据用ha原创 2011-12-11 14:25:39 · 12676 阅读 · 3 评论 -
从Storm学习集群管理
从Storm看集群管理 简介Storm是当前最流行的分布式实时计算平台,使用场景是根据Storm定义的接口规范编写一个实时处理流,然后提交到Storm平台处理,Storm平台解析该处理流,使其并行、分布式地在集群中运行,并附带相应的状态监控。本文主要描述Storm的集群管理这块的内容,处理流的相关接口逻辑规范不作涉及。 Storm集群监控管理的目标是管理和监控用户提交的原创 2015-01-31 16:43:12 · 2760 阅读 · 1 评论