kafka
comprel
这个作者很懒,什么都没留下…
展开
-
kafka常用命令
添加环境变量:vi ~/.bash_profilePATH=$PATH:$HOME/bin:/app/kafka_2.11-2.2.0/binexport PATHkafka在bin目录下提供的一些工具:kafka-acls.sh kafka-preferred-replica-election.shkafka-broker-api-v...原创 2020-03-18 18:25:17 · 446 阅读 · 0 评论 -
python使用kafka
python使用kafka1.安装包:pip install kafka或pip install python-kafka文档:https://kafka-python.readthedocs.io/en/master/usage.html2.生产者:#coding:utf-8from kafka import KafkaProducerproducer = KafkaP...原创 2020-03-12 17:27:36 · 765 阅读 · 1 评论 -
java使用kafka入门
创建一个maven项目, 名称: kafkaDemo添加依赖在pom.xml文件中: <dependencies> <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.11</artifactId> ...原创 2020-03-12 15:32:49 · 1949 阅读 · 0 评论 -
kafka概念及基本原理
kafka:作用:1.消息系统: 系统解耦,冗余存储, 流量削峰, 缓冲,异步通信,扩展性,可恢复性2.存储系统 将消息持久化到磁盘3.流式处理平台高吞吐,低延时kafka本质上每次写入操作其实都是把数据写入到操作系统的页缓存中, 然后操作系统将页缓存中的数据刷回到磁盘中producer 生产者, broker 相当于kafka服务进程, consumer 消费者, zk集群过...原创 2020-03-12 15:27:56 · 1303 阅读 · 0 评论 -
kafka单机测试环境搭建
kafka单服务器搭建kafka搭建需要jdk, zookeeper因此搭建前需先准备好JDK环境由于kafka的安装包中已经内置一个zk,因此可以不用另外搭建, 当然如果想独立处理,或者已经拥有zk也可以接入使用下载地址:http://kafka.apache.org/downloads1.下载下载带有scala的安装包Binary downloads:Scala 2.11 ...原创 2019-09-01 20:31:00 · 311 阅读 · 0 评论