分布式的消息队列系统——Kafka

原创 2015年11月20日 23:15:03

      Kafka是由Linkedin开发的一个分布式的消息队列系统(Message Queue),开发的主要初衷目标是构建一个用来处理海量日志,用户行为和网站运营统计等的数据处理框架。在结合了数据挖掘,行为分析,运营监控等需求的情况下,需要能够满足各种实时在线和批量离线处理应用场合对低延迟和批量吞吐性能的要求。简言之,kafka试图提供一个同时满足在线和离线处理海量数据的消息派发系统。

    几篇介绍较为详细的文章:

     (1)http://www.aboutyun.com/thread-12882-1-1.html

     (2)http://www.cnblogs.com/likehua/p/3999538.html

     (3)http://www.infoq.com/cn/articles/kafka-analysis-part-1/

     (4)http://blog.csdn.net/colorant/article/details/12081909

高并发面试必问:分布式消息系统Kafka简介

Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发,之后成为Apache项目的一部分。Kafka是一个分布式的,可划分的,冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。...
  • caisini_vc
  • caisini_vc
  • 2015年08月26日 17:58
  • 12804

分布式消息队列RocketMQ与Kafka的18项差异之“拨乱反正”

在网络上一直流传着1篇阿里中间件团队所写的RocketMQ与Kafka的18项差异的文章,并且被广泛转发。比如: http://blog.csdn.net/damacheng/article/det...
  • chunlongyu
  • chunlongyu
  • 2016年12月23日 14:45
  • 3570

快速理解Kafka分布式消息队列框架

Kafka是由Linkedin开发的一个分布式的消息队列系统(Message Queue)。kafka开发的主要初衷目标是构建一个用来处理海量日志,用户行为和网站运营统计等的数据处理框架。在结合了数据...
  • colorant
  • colorant
  • 2013年09月27日 10:05
  • 59334

分布式消息队列(Message Queue)系统:kafka

分布式系统很重要的一个设计原则是松耦合,即尽量减少子系统间的依赖。这样各个子系统可以相互独立的进行演进,维护,重用等。Message Queue (MQ)是一种很好的解耦手段。要了解MQ在系统整合中的...
  • SaaS_Tech
  • SaaS_Tech
  • 2011年10月18日 14:29
  • 13615

分布式消息队列(Message Queue)系统:kafka扫盲

分布式系统很重要的一个设计原则是松耦合,即尽量减少子系统间的依赖。这样各个子系统可以相互独立的进行演进,维护,重用等。Message Queue (MQ)是一种很好的解耦手段。要了解MQ在系统整合中的...
  • jdbc
  • jdbc
  • 2014年10月01日 12:01
  • 1826

java后端系统架构之消息队列篇:kafka的实验

分布式队列kafka
  • wh0426
  • wh0426
  • 2015年04月09日 09:35
  • 1876

kafka消息队列集群安装说明

  • 2017年11月10日 14:17
  • 24KB
  • 下载

Kafka实战开源消息队列的坑与对策-刘喆

  • 2016年07月27日 18:03
  • 5.12MB
  • 下载

Liunx嵌入式系统进程间通信实例(二)—消息队列

  • 2015年01月29日 20:41
  • 12KB
  • 下载

Kafka是一种分布式的,基于发布/订阅的消息系统

Kafka剖析(一):Kafka背景及架构介绍 稍 背景介绍 Kafka创建背景 Kafka是一个消息系统,原本开发自LinkedIn,用作LinkedI...
  • huaweitman
  • huaweitman
  • 2017年11月27日 13:26
  • 70
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:分布式的消息队列系统——Kafka
举报原因:
原因补充:

(最多只允许输入30个字)