kafka的安装配置

1. 操作系统

macos系统

2. 安装

brew install zookeeper
brew install kafka

安装地址:

        /usr/local/Cellar/kafka/2.8.0/bin

配置文件地址: 

        /usr/local/etc/kafka/server.properties 

        /usr/local/etc/kafka/zookeeper.properties

配置文件修改:

##### Socket Server Settings #####
listeners=PLAINTEXT://localhost:9092

3. 命令行使用

启动方式:

方法一:
brew services start zookeeper
brew services start kafka

方法二:
/usr/local/Cellar/kafka/2.8.0/bin/zookeeper-server-start /usr/local/etc/kafka/zookeeper.properties &
/usr/local/Cellar/kafka/2.8.0/bin/kafka-server-start /usr/local/etc/kafka/server.properties &

查看启动情况:

sanford@bogon ~ % jps
45527 QuorumPeerMain
46007 Jps
26813 
45679 Kafka

停止服务:

方法一:
brew services stop kafka
brew services stop zookeeper

方法二:
/usr/local/Cellar/kafka/2.8.0/bin/kafka-server-stop
/usr/local/Cellar/kafka/2.8.0/bin/zookeeper-server-stop

相关命令

创建topic:
kafka-topics --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic sanford

查询所有topic:
kafka-topics --list --zookeeper localhost:2181

查询指定topic:
kafka-topics --describe --zookeeper localhost:2181 --topic sanford

删除topic:
kafka-topics --delete --zookeeper localhost:2181 --topic sanford

启动生产者

kafka-console-producer --topic sanford --broker-list localhost:9092

启动两个消费者

消费者1
kafka-console-consumer --topic sanford -group demo_00 --bootstrap-server localhost:9092 --from-beginning

消费者2
kafka-console-consumer --topic sanford -group demo_01 --bootstrap-server localhost:9092

注释:
--from-beginning 是否从开始消费

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Apache Kafka 是一个分布式流处理平台,用于构建实时数据管道和消息队列系统。在 CentOS 上安装配置 Kafka 需要几个步骤,以下是基本的安装过程: 1. **安装Java**: Kafka依赖于Java,所以首先确保你的系统上安装了Java。如果没有,可以通过以下命令安装: ``` sudo yum install java-1.8.0-openjdk-devel -y ``` 2. **下载Kafka压缩包**: 从Apache官网(https://kafka.apache.org/downloads)下载适合的版本。例如,使用wget命令: ``` wget https://archive.apache.org/dist/kafka/2.9.1/kafka_2.12-2.9.1.tgz ``` 3. **解压并移动文件**: ``` tar -zxvf kafka_2.12-2.9.1.tgz sudo mv kafka_2.12-2.9.1 /opt/ ``` 4. **配置环境变量**: 将Kafka的bin目录添加到系统的PATH中: ``` echo 'export PATH=$PATH:/opt/kafka_2.12-2.9.1/bin' >> ~/.bashrc source ~/.bashrc ``` 5. **启动Zookeeper服务(可选,如果你没有安装)**: 如果集群包含Zookeeper节点,先启动它。否则略过这一步: ``` sudo systemctl start zookeeper sudo systemctl enable zookeeper ``` 6. **安装Kafka服务**: 进入Kafka目录并运行安装脚本: ``` cd /opt/kafka_2.12-2.9.1 ./bin/install.properties ``` 7. **配置Kafka**: 编辑`config/server.properties`文件以适应你的需求,比如设置监听端口、日志路径等。确保`listeners`属性配置了网络监听地址。 8. **启动Kafka服务**: ``` bin/kafka-server-start.sh config/server.properties ``` 9. **验证安装**: 使用`bin/kafka-topics.sh`命令检查是否能创建主题或查看现有主题。 10. **监控服务**: 使用`bin/kafka-control.sh`进行管理和监控。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值