kafka的创建、启动和消费

kafka的创建、启动和消费

	1、进入bin目录   
	./kafka-topics.sh —create —bootstrap-server qf01:9092 —replication-factor 1 —partition 1 —topic kafkaTest 
	其中:qf01:9092 是虚拟机的地址和端口,kafkaTest是主题topic
	
	2、查看所有的kafka中的topic列表
	bin/kafka-topics.sh --list --bootstrap-server <kafka-server>:<port>

	3、测试生产者
	./kafka-console-producer.sh --broker-list qf01:9092 --topic kafkaTest(要启动生成者的topic名称)
	
	 4、测试消费者
	./kafka-console-consumer.sh --bootstrap-server qf01:9092 --topic test --from-beginning
	其中:qf01:9092 是虚拟机的地址和端口,kafkaTest是主题topic

	测试:最好分别用两个黑白页面启动生产者和消费者,这样生产者生产数据,在消费端直接显示生产的数据。
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
启动 Kafka 消费者,你需要执行以下步骤: 1. 确保 Kafka 服务器已经启动并运行。 2. 确定你有一个有效的 Kafka 主题,以便消费数据。 3. 在你的代码中添加 Kafka 客户端库的依赖,如果你使用的是 Java,则可以使用 Apache Kafka 的 Java 客户端。4. 创建一个 Kafka 消费者实例,并配置它所需要的属性,例如 Kafka 服务器的地址和端口号,消费者组 ID 等。 5. 订阅你感兴趣的主题,可以是单个主题或多个主题。 6. 编写处理消息的逻辑,例如打印消息或将其保存到数据库中。 7. 启动消费者,开始接收和处理消息。 下面是一个简单的 Java 代码示例,用于启动 Kafka 消费者消费名为 "my-topic" 的消息: ```java import org.apache.kafka.clients.consumer.Consumer;import org.apache.kafka.clients.consumer.ConsumerConfig; import org.apache.kafka.clients.consumer.ConsumerRecords; import org.apache.kafka.clients.consumer.KafkaConsumer; import org.apache.kafka.common.serialization.StringDeserializer; import java.util.Collections; import java.util.Properties; public class KafkaConsumerExample { private static final String TOPIC_NAME = "my-topic"; private static final String BOOTSTRAP_SERVERS = "localhost:9092"; private static final String GROUP_ID = "my-consumer-group"; public static void main(String[] args) { // 配置消费者属性 Properties props = new Properties(); props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, BOOTSTRAP_SERVERS); props.put(ConsumerConfig.GROUP_ID_CONFIG, GROUP_ID); props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName()); props.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG, StringDeserializer.class.getName()); // 创建消费者实例 Consumer<String, String> consumer = new KafkaConsumer<>(props); // 订阅主题 consumer.subscribe(Collections.singletonList(TOPIC_NAME)); // 持续消费消息 while (true) { ConsumerRecords<String, String> records = consumer.poll(1000); records.forEach(record -> { System.out.println("Received message: " + record.value()); }); } } } ``` 请根据你的实际情况修改 `BOOTSTRAP_SERVERS`、`TOPIC_NAME` 和 `GROUP_ID` 的值,并根据你的需求自定义消息处理逻辑。记得将 Kafka 客户端库添加到项目的依赖中。
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值