kafka
文章平均质量分 80
wuguofei12345
记录工作中的点点滴滴,积跬步,至千里。
展开
-
Kafka系列文章之基本概念
本文将粗略的介绍一下kafka以及kafka的一些基本概念,这些概念都是学习和使用kafka时必须理解和掌握的。以后的文章中会通过具体的使用场景详细的介绍。欢迎各位网友批评指正,转发请注明出处。 1.kafka是什么 根据官方的解释,kafka是一个分布式的流处理平台。Kafka是为了解决LinkedIn数据管道问题应运而生的。它的设计目的是提供一个高性能的消息系统,可以处理多种数据类型,并能...原创 2019-03-24 21:17:52 · 164 阅读 · 0 评论 -
Kafka系列文章之kafka环境搭建
1.下载kafka http://kafka.apache.org/downloads,现在最新的版本是2.1.1 2.解压 将安装包解压到指定位置 3.修改配置文件 3.1.修改kafka_home/config/zookeeper.properties,将dataDir 修改为自己的data文件夹 3.2.修改kafka_home/config/server.properties,...原创 2019-03-25 11:04:54 · 136 阅读 · 0 评论 -
Kafka系列之第一个kafka程序
1.创建一个springboot的工程 2.pom.xml添加原始的kafka maven依赖 <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.12</artifactId> <version>2.1...原创 2019-03-25 22:22:00 · 477 阅读 · 0 评论 -
Kafka系列之kafka参数配置
参数名称 参数说明 broker参数 broker.id broker的唯一标示,可以使任意值,但是必须在整个kafka集群中唯一 port broker的端口,建议设置在1024以上 zookeeper.connect zookeeper地址 log.dirs 用于存放kafka消息的文件路径,可以指定多个,用“,”分割 num....原创 2019-04-21 12:28:25 · 622 阅读 · 0 评论