kafka
水番丘山
最美的架构不是设计好的,而是不断演变进化而来。
展开
-
kafka集群部署以及java客户端测试
kafka集群部署以及java客户端测试本文主要讲述本人的集群部署kafka过程以及遇到的问题: 其中:kafka版本为:kafka_2.10,zookeeper版本为:zookeeper-3.4.8,jdk-8u101-linux-x64 一 kafka以及zookeeper安装以及环境配置 二 zookeeper集群配置以及测试 三 kafka集群配置以及测试原创 2016-12-08 16:37:32 · 10411 阅读 · 5 评论 -
集群下的kafka实现多线程消费
上一篇文章讲述了如何部署kafka集群,而这篇文章则来探讨一下如何使用多线程消费,提高消费能力,保障数据的时效性。而实现多线程消费其实很简单,只需要三步即可:一:kafka集群配置多线程消费,说白了就是多区消费,kafka可以给topic设置多个partition,从而实现生产的时候提交到不同的分区,以减少统一区块的压力。而消费则是从不同的分区里拿数据进行消费。1.首先修改server.prop原创 2017-05-18 21:19:51 · 15119 阅读 · 0 评论