IDEA充当producer,Kafka上充当消费者
1.在集群上启动zookeeper
[root@slave2 kafka]# zkServer.sh start
2.集群上启动Kafka(先进入Kafka目录下)
[root@slave2 kafka]# bin/kafka-server-start.sh config/server.properties
启动成功后会有很长的代码最后停止不动,光标闪烁
3.在idea中输入生产者代码(导入kafka依赖,配置好maven)
package Test;
import java.util.Properties;
import org.apache.kafka.clients.producer.KafkaProducer;
import org.apache.kafka.clients.producer.ProducerRecord;
public class KafkaProducerTest {
public static void main(String[] args){
Properties props = new Properties();
props.put("bootstrap.servers","192.168.110.12:9092"); //输入的地址要和消费者的IP一致
props.put("asks","all");
props.put("retries",0);
props.put("batch.size",16438);
props.put("linger.ms",1);
props.put("buffer.memory",33554432);
props.put("key.serializer","org.apache.kafka.common.serialization.StringSerializer");
props.put("value.serializer","org.apache.kafka.common.serialization.StringSerializer");
//生产数据
KafkaProducer<String, String>producer = new KafkaProducer<String, String>(props);
for (int i = 0; i < 50; i++){
producer.send(new ProducerRecord<String,String>("casttopic11",Integer.toString(i), "hello word-" + i));
}
producer.close();
}
}
4.在虚拟机上(启动kafka的虚拟机不要动,另外开一个)输入消费者消费的命令
[root@slave2 kafka]#bin/kafka-console-consumer.sh --bootstrap-server 192.168.110.12:9092 --topic casttopic11
然后在idea中运行代码
注意:在输入消费者命令的时候要与你idea生产者输入的主机IP对应。在idea生产数据时所输入的topic名字要与你输入的消费者命令的topic一致。
附一张maven依赖配置
我这个只做Kafka生产者和消费者。所以只有这些。
其中slf4j。我是因为报错所以才添加的。
第一次写这个,如果有不对的请指教,谢谢