Kafka在网络中的位置和作用

• 第一阶段，首次搭建应用网络如下：

  • Web应用部署在云服务器上，为个人电脑或移动用户提供访问服务。
  • SQL数据库为Web应用提供数据持久化和数据查询。

  

• 第二阶段：基于业务的迅速发展，网络扩容如下：

  • 增加缓存服务，从而降低SQL数据库的荷载。
  • 搜集日志保存至Hadoop做离线处理，从而更加理解用户行为。
  • 数据汇总至数据仓库，从而获取交互式报表。
  • 加入实时模块和外部数据交互等等。

  

  网络扩容后的问题如下：

  • 不同系统之间的数据同步
  • 系统扩展问题

• 第三阶段：新增Kafka模块提供消息队列，Web应用数据只需向队列中添加数据，网络中的各组件从队列中依次读取数据并自行处理，如下图所示：

  

  网络扩容带来的问题迎刃而解，而且降低了系统组网复杂度；降低编程复杂度，各个子系统不在是相互协商接口，各个子系统类似插口插在插座上，Kafka承担高速数据总线的作用。

文章转载自https://cloud.baidu.com/doc/Kafka/ProductDescription.html