Kafka环境:
单机服务器, topic:test
解压
tar -xzf kafka_2.11-0.10.2.0.tgz
cd kafka_2.11-0.10.2.0
启动zookeeper
1.zookeeper服务QuorumPeerMain(法定进程)(jps查看是否启动)
2.Zookeeper的客户端端口(默认2181)可以在zookeeper.properties中配置,与server(broker),消费者配置文件的zookeeper客户端端口一致。此处生产者,消费者的配置文件只是为了kafka命令行测试。
nohupbin/zookeeper-server-start.sh config/zookeeper.properties &
一直有日志输出,不能结束端口,于是将zookeeper进程变成守护进程,使其与当前session分离,当前session结束不会影响zookeeper进程。
启动kafka
可以使用jps查看kafka进程是否启动
nohup bin/kafka-server-start.sh config/server.properties &
nohup+& 使kafka进程变成守护进程。
创建一个示例topic test
需要指定zookeeper集群,topic的名字,分区个数,分区的副本等
bin/kafka-topics.sh --create --zookeeper localhost:2181--replication-factor 1 --partitions 1 --topic test
表示一个分区,一个副本
查看所有的topic
bin/kafka-topics.sh --list --zookeeper localhost:2181
test
启动生产者
指定生产者的broker,toipc等
bin/kafka-console-producer.sh --broker-list localhost:9092 --topictest
This is a messageThis is another message
启动消费者
指定消费者的bootstrap-server(引导程序服务器),toipc等,如果没有指明从最开始开始消费,则从最近消费的地方开始消费。
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092--topic test --from-beginning
This is a message
This is another message
备注:直接运行脚本可以看到输出,显示需要哪些必须的参数,参数的定义等。
总结:
1. 其实搭建一个环境都大同小异
2. 要知道用jps查看java进程
3. 用kill杀死进程,用pkill批量杀死进程
4. 用netstat查看进程的网络情况
5. ps -ef查看进程的具体信息