kafka基本操作指令（脚本）

先启动zookeeper，然后启动kafka

zookeeper
启动：[root@VM_0_9_centos bin]#./zkServer.sh start  
查看：[root@VM_0_9_centos bin]#./zkServer.sh status
停止：[root@VM_0_9_centos bin]#./zkServer.sh stop
登录：./zkCli -server ip:port  for example(localhost:2181)

kafka
启动：[root@VM_0_9_centos bin]#./kafka-server-start.sh    ../config/server.properties &
停止：[root@VM_0_9_centos bin]#./kafka-server-stop.sh
主题列表：[root@VM_0_9_centos bin]# ./kafka-topics.sh --list --zookeeper localhost:2181
创建主题：[root@VM_0_9_centos bin]# ./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic  myTopicName
查看主题：[root@VM_0_9_centos bin]# ./kafka-topics.sh --describe --zookeeper localhost:2181 --topic myTopicName
删除主题：[root@VM_0_9_centos bin]# ./kafka-topics.sh --delete --zookeeper localhost:2181 --topic myTopicName
查看主题消息数据：kafka-run-class.sh kafka.tools.DumpLogSegments --files /opt/kafka_2.10-0.10.1.1/kafkaLog/myTopicName/00000000000000000000.log --print-data-log
查看主题消息数量：kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list localhost:9092 --topic myTopicName --time -1

生产者：[root@VM_0_9_centos bin]# ./kafka-console-producer.sh --broker-list 127.0.0.1:9092 --topic myTopicName

旧版本高级消费者：消费偏移量默认保存在zookeeper，可以通过offsets.storage=kafak设置讲消费偏移量保存在kafka内部主题中
        ./kafka-console-consumer.sh --zookeeper localhost:2181  --topic myTopicName --consumer-property  group.id=myGroupId --consumer-property consumer.id=myConsumerId --from-beginning --delete-consumer-offsets    
旧版本低级消费者：只能消费某个主题的某个分区，并且不会向zookeeper注册元数据信息，所以需要自动维护消费偏移量
        ./kafka-simple-consumer-shell.sh --broker-list(代理地址) localhost:9092 --clientId simple-consumer-test --offset -1 --partition 0 --topic myTopicName
新版本消费者：不向zookeeper注册元信息，偏移量由__consumer_offets内部主题管理
        ./kafka-console-consumer.sh --bootstrap-server localhost:9092  --new-consumer --consumer-property group.id=myGroupId  --consumer-property client.id=myConsumerId --topic myTopicName
消费多个主题：kafka-console-consumer.sh --bootstrap-server localhost:9092  --new-consumer --consumer-property group.id=myGroupId --whitelist ” topicOne|topicTwo”        

查看新类型消费组信息：kafka-consumer-groups.sh --bootstrap-server localhost:9092  --list --new-consumer
查看某消费组消费某主题的偏移量:kafka-consumer-offset-checker.sh --zookeeper   localhost:2181  --topic myTopicName --group myGroupName --broker-info