kafka

一 是什么

分布式消息和订阅系统--不是基于JMS

特性（区别于activeMQ）：

1.高性能，高吞吐量

2.内置分区，实现集群，冗余和容错性

 

二 从哪来

linkedln活动流和运营数据处理管道

 

三 应用场景

1.行为跟踪

2.日志收集：分布式系统，集群部署方式收集日志很难定位问题，使用日志统一收集平台(kafka）,然后使用ES,HDFS做实时检索分析和离线统计数据备份

 

四 架构

provider去push到broker，consumer到broker去拉（activeMQ是提供方直接给消费方，消费方不用再去拉）

 

五概念

1.kafka集群：利用zookeeper做注册/订阅的协调处理

topic

partition

group