kafka入门(二)

一、单播消费  多播消费

一个分区只能由一个消费组下面的某个消费者消费,可以理解成点对点,即单播消费

一个分区可以由多个消费组中的某个消费者消费,可以理解成发布订阅模式。即多播消费

在同一个消费群租里的消费者数量不能大于分区数,不同的消费群租可以理解成不同的程序

                           

在配置kafka集群的时候,可以不用把所有的服务地址都写上,因为kafka可以通过zookeeper找到真正的主节点,如果在发送消息时,没有指定发送到哪个分区,则kafka会轮询发送到每个分区,如果调用的方法参数指定了key,则会计算出key的hash值然后对总分区数取模,最终计算出发送到哪个分区,如果调用的方法即指定了分区也设置了key,则按照指定的分区发送。

二、同步、异步发送消息

1、同步:发送消息后,代码一直处于阻塞状态知道发送消息返回结果。

2、异步:发送消息后,会通过callBack回调,返回消息发送成功还是失败,但是这个回调不影响下面的代码,下面的代码可以继续执行。

三、消费者

   kafka消费者是一个长轮询方法poll()方法

四、kafak为什么效率高?

1、服务端无状态(offset不用自己维护,交给zookeeper维护)

2、kafka采用磁盘顺序写,省去了碎片空间的消耗

五、kafka选举

 kafka在每个broker启动时,会在zookeeer给每个服务创建一个临时节点,并且选出一个主节点,当主节点挂到之后,会通过监听通知其他服务器,其他机器收到通知后,后进入选举状态,所有节点就会同时调用zookeeper的creater path命令创建相同的目录(这就是zookeeper的分布式锁),因为这个节点是唯一的,所以谁最先创建了谁就是新的主节点,

 

 

 

 

 

.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值