消息中间件 kafka 1

1.简单介绍
  天然分布式
  存储系统（磁盘，持久化）
  流式处理（聚合，统计）
  Stream
  大数据 Hadoop1,大数据文件系统，数据分析上
  kafka 实时版，核心业务上
2.消息，字节数据
  批次，支持批量，吞吐量，相应时间之间的权衡
  主题，就是表，分区，就是分表，Partition1,p2,文件可以放在不同的服务器上
  生产者，消费者，偏移量，消费者群组
3.Broker和集群
  分区复制，消息冗余，有一个首领
4.优点
  多生产者和消费者
  基于磁盘的数据存储
  高伸缩性
  高性能
5.常见场景
  活动跟踪
  传递消息
  手机日志和指标
  提交日志
  流处理
6.性能
  磁盘，影响生产者
  内存，影响消费者，有虚拟内存的概念
  网络，影响生产者，消费者
  cpu，体现在压缩上面