![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
忘川风华录
少年早闻有大才 方及弱冠
展开
-
Kafka下载安装及部署
一、环境配置操作系统:Cent OS 7Kafka版本:0.10.0.0JDK版本:1.8.0_51二、操作过程1、下载Kafka并解压解压:tar zxvf kafka_2.11-0.10.0.0.tgz2、Kafka目录介绍/bin 操作kafka的可执行脚本,还包含windows下脚本/config 配置文件所在目录/libs 依赖库目录/logs 日志数...原创 2018-11-06 15:54:50 · 2666 阅读 · 0 评论 -
为什么我的消费者只能拿到生产者产生一部分partition的消息!!!原因在这里!!!
能进来看这篇帖子的,说明你已经看过kafka的消费者是怎么样分配partition的。只是你没有把知识活学活用而已原创 2018-10-30 19:26:10 · 1150 阅读 · 0 评论 -
flume整合kafka外加操作代码及配置文件!!亲测有效
我这次写的是我在学习完flume和kafka之后做的一个Demo,而且在flume采集完成之后,加上一个kafka能起到消峰缓冲的效果首先需要的两大组件及其版本Kafka2.11 Flume1.7 (jdk1.8 scala2.11)当然具体的安装我就不做过多的解释了,我是在本地的idea使用log4j自己创建信息:在此之前我们需要创建一个properties文件(...原创 2018-11-07 13:42:52 · 1699 阅读 · 0 评论