--------【 hadoop 】
文章平均质量分 74
dandanPMO
这个作者很懒,什么都没留下…
展开
-
zookeeper工作原理总结
zookeeper,很多人称他为动物园管理员,其实挺贴切,也有些笼统。 我们平时看到的zookeeper一般是以集群出现在大家的视线中,很少用single zookeeper。整体架构zookeeper集群中,主要有三个角色:leader、follower、Observer leader:接受所有follower的提案请求并统一发起提案的投票负责与所有的follower进行内部数据原创 2016-06-30 14:54:04 · 1112 阅读 · 2 评论 -
kafka集群+zookeeper集群常见问题与命令
常见疑问1、生产者无法产生消息 kafka.common.FailedToSendMessageException: Failed to send messages after 3 tries. 将slf4j-nop-1.7.21.jar上传到kafka的lib包下 参考文章:http://stackoverflow.com/questions/23903843/apache-kafka-ex原创 2016-06-30 21:35:50 · 3928 阅读 · 0 评论 -
kafka之副本机制
Kafka允许topic的分区拥有若干副本,这个数量是可以配置的,你可以为每个topci配置副本的数量。Kafka会自动在每个个副本上备份数据,所以当一个节点down掉时数据依然是可用的。 Kafka的副本功能不是必须的,你可以配置只有一个副本,这样其实就相当于只有一份数据。 创建副本的单位是topic的分区,每个分区都有一个leader和零或多个followers.所有的读写操作都由leade原创 2016-06-30 21:38:48 · 7948 阅读 · 3 评论