kafka总结笔记

Kafka是一个高吞吐、分布式的发布订阅消息系统,具备消息持久化、高并发、低延迟等特点,常用于日志收集、网站活性跟踪等场景。Kafka集群包括Producer、Broker、Consumer和Zookeeper,通过Partition实现高吞吐,通过Replication保障数据可靠性。尽管存在消息乱序、不支持事务等缺点,但其强大的性能使其在大数据领域广泛应用。
摘要由CSDN通过智能技术生成

Kafka简介:
    Kafka是一个高吞吐,分布式,基于发布订阅的消息系统,
    利用Kafka技术可在廉价PC Server上搭建起大规模消息系统。
应用场景:Kafka和其他组件比较,具有消息持久化,高吞吐,实时等特性,适用于离线和
          实时的消息消费,如网站活性跟踪,聚和统计系统运营数据(监控数据),
          日志收集等大量数据的数据手机场景。
优点:
高吞吐量、低延迟:kafka每秒可以处理几十万条消息,它的延迟最低只有几毫秒;

可扩展性:kafka集群支持热扩展;

持久性、可靠性:消息被持久化到本地磁盘,并且支持数据备份防止数据丢失;

容错性:允许集群中节点故障(若副本数量为n,则允许n-1个节点故障);

高并发:支持数千个客户端同时读写
缺点:消息乱序(不能保证全局有序)、不支持事务(可能会丢消息或有重复消息)、
复杂性(部署和维护成本更高)
          
Kafka拓扑结构图:
1>一个典型的Kafka集群中包含若干Producer(可以是web前端产生的page View,或者是服务器日志,系统CPU,Memory等),
若干Broker(Kafka支持水平扩展,一般broken数量较多,集群吞吐率越高),若干Consumer,以及一个Zookeeper集群。
Kafka通过

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值