Kafka
文章平均质量分 84
顾晓艳
这个作者很懒,什么都没留下…
展开
-
Kafka 安装与入门
kafka是一个消息订阅和发布的系统,因为项目的需要这边要安装部署,这里讲述下kafka的安装和一些简单的入门操作一、kafka安装kafka的下载地址http://kafka.apache.org/downloads.html这边用的是kafka_2.9.2-0.8.1.1.tgz,因为这个是官网推荐的稳定版本具体地址http://apache.fayea.com/apach原创 2014-11-18 16:14:30 · 1429 阅读 · 0 评论 -
关于Kafka 的消息日志Offset 的了解
之前在做Kafka 整合Storm的时候,因为对Kafka 不是很熟,考虑过这样的一个场景问题,针对一个Topic,Kafka消息日志中有个offset信息来标注消息的位置,Storm每次从kafka 消费数据,都是通过zookeeper存储的数据offset,来判断需要获取消息在消息日志里的起始位置。而Kafla 有个参数log.retention.hours会根据设定的小时,来清理日志文件原创 2014-12-18 17:31:44 · 19579 阅读 · 3 评论