kafka教学(一)，异步通信原理

目录

kafka简介

概述：

点对点的消息传递模式

发布订阅模式 

使用消息中间件的优势

---

kafka简介

概述：

Kafka是最初由Linkedin 开发公司开发的一个分布式，分区的，多副本的，多订阅者的，基于zookeeper协调的分布式日志系统(也可以当作MQ系统)。

Kafka主要设计目标如下：

• 以时间复杂度为O(1)的方式提供消息持久化能力，即使对TB级以上数据也能保证常数时间的访问性能。
• 高吞吐率。即使在非常廉价的商用机器上也能做到单机支持每秒100K条消息的传输。
• 支持Kafka Server间的消息分区，及分布式消费，同时保证每个partition内的消息顺序传输。
• 同时支持离线数据处理和实时数据处理。
• Scale out:支持在线水平扩展

一.Kafka 应用场景：

       日志收集：一个公司可以用Kafka可以收集各种服务的log，通过kafka以统一接口服务的方式开放给各种consumer；

       消息系统：解耦生产者和消费者、缓存消息等；

        用户活动跟踪：kafka经常被用来记录web用户或者app用户的各种活动，如浏览网页、搜索、点击等活动，这些活动信息被各个服务器发布到kafka的topic中，然后消费者通过订阅这些topic来做实时的监控分析，亦可保存到数据库；

       运营指标：kafka也经常用来记录运营监控数据。包括收集各种分布式应用的数据，生产各种操作的集中反馈