kafka单机部署

下载kafka

wget http://apache.fayea.com/kafka/0.10.0.1/kafka_2.10-0.10.0.1.tgz

tar -xvzf kafka
cd kafka_2.10-0.10.0.1

编辑配置文件config/server.properties :修改 zookeeper.connect为172.172.177.52:2181

zookeeper.connect=172.172.177.52:2181

producer.properties配置文件也修改一下 zookeeper.connect,创建kafka的日志目录 mkdir

/tmp/kafka-logs

启动kafka:

nohup bin/kafka-server-start.sh config/server.properties &

创建一个test的消息队列:

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

创建一个消费者(创建完毕后,界面会卡住,此时不要动)

bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning 

重新开一个shell,创建一个生产者

bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test

输入:hello kafaka ~~~~

打开,刚才消费者的那个界面,显示

hello kafaka ~~~~

ok,搞定

其他:

如果需要删除topic 的话,
使用:

./bin/kafka-topics  --delete --zookeeper localhost:2181  --topic test

然后执行:

rm -rf /tmp/kafka-log
rm -rf /tmp/zookeeper

最后使用工具或者命令登录zk ,删除zookeeper上的topic节点,例如broker config 等,最后重启zk和kafka

要在单机部署Docker Kafka,您可以按照以下步骤进行操作: 1. 首先,确保您已经安装了Docker和Docker Compose。您可以使用以下命令检查它们的安装情况: - `docker --version`:检查Docker的版本 - `docker-compose --version`:检查Docker Compose的版本 2. 如果您尚未安装Docker Compose,您可以按照官方文档提供的步骤进行安装。您可以使用以下命令下载并安装Docker Compose: - `sudo curl -L "https://github.com/docker/compose/releases/download/1.29.2/docker-compose-Linux-x86_64" -o /usr/local/bin/docker-compose` - `sudo chmod +x /usr/local/bin/docker-compose` 3. 创建一个名为`docker-compose.yml`的文件,并在其中定义Kafka服务。您可以使用以下示例作为参考: ``` version: '3' services: zookeeper: image: confluentinc/cp-zookeeper:6.2.0 ports: - "2181:2181" environment: - ZOOKEEPER_CLIENT_PORT=2181 kafka: image: confluentinc/cp-kafka:6.2.0 ports: - "9092:9092" environment: - KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 - KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://kafka:9092 - KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR=1 ``` 4. 使用以下命令启动Kafka服务: - `docker-compose up -d` 5. 您可以使用以下命令检查Kafka容器的运行状态: - 使用Compose命令:`docker-compose ps` - 使用Docker命令:`docker ps` 6. 现在,您的Docker Kafka单机部署已经完成。您可以使用以下命令连接到Kafka容器并执行相关操作: - `docker exec -it kafka bash`:连接到Kafka容器的命令行界面 - `cd /opt/kafka_2.13-2.7.0`:进入Kafka安装目录 - `./bin/kafka-console-consumer.sh --bootstrap-server kafka:9092 --topic test001 --from-beginning`:启动Kafka消费者并订阅名为`test001`的主题,从开头开始消费消息 请注意,上述步骤中的命令和配置可能需要根据您的实际环境和需求进行调整。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值