Kibana安装

1、下载官网的下载地址kibana-6.6.2-linux-x86_64.tar.gz
在root用户下安装Kibana，
执行如下命令
2、解压 tar -zxvf kibana-6.6.2-linux-x86_64.tar.gz -C /opt/
3、重命名mv kibana-6.6.2-linux-x86_64.tar.gz kibana
4、配置编辑文件kibana.ymlvi kibana/config/kibana.yml
修改如下内容：
默认的访问的端口，去掉注释就可以server.port: 5601
允许访问的IP地址，0.0.0.0允许任何ip访问server.host: 192.168.73.129
连接elasticsearch所在的地址，根据实际情况修改，我是同一台机器，就不需要改 elasticsearch.hosts: [“http://192.168.73.129:9200”]
5、启动Kibana执行如下命令/opt/kibana/bin/kibana如果想后台运行执行命令/opt/kibana/bin/kibana &
6、访问KibanaKibana启动成功后，可以在浏览器访问http://localhost:5601，locahost是你服务器的ip地址，请按实际情况修改

查看主题 bin/kafka-topics.sh --zookeeper hdp2:2181 --list
创建主题 bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 4 --topic test

启动flume-nc flume-ng agent --conf conf --conf-file /usr/local/apache-flume-1.9.0-bin/conf/flume-nc-properties --name a1 -Dflume.root.logger=INFO,console
##后台启动kafka
bin/kafka-server-start.sh -daemon config/server.properties

.启动zookeeper 采用的相对路径
[root@localhost kafka]# bin/zookeeper-server-start.sh config/zookeeper.properties
7.启动kafka 绝对路径
/usr/local/kafka/bin/kafka-server-start.sh /usr/local/kafka/config/server.properties

创建主题（4个分区，2个副本）

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 2 --partitions 4 --topic test

查询集群描述

bin/kafka-topics.sh --describe --zookeeper

消费者列表查询

bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --list

新消费者列表查询（支持0.9版本+）

bin/kafka-consumer-groups.sh --new-consumer --bootstrap-server localhost:9092 --list

显示某个消费组的消费详情（仅支持offset存储在zookeeper上的）

bin/kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --zookeeper localhost:2181 --group test

显示某个消费组的消费详情（支持0.9版本+）

bin/kafka-consumer-groups.sh --new-consumer --bootstrap-server localhost:9092 --describe --group test-consumer-group

生产者

bin/kafka-console-producer.sh --broker-list hdp2:9092 --topic test

消费者

bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test

新生产者（支持0.9版本+）

bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test --producer.config config/producer.properties

新消费者（支持0.9版本+）

bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --new-consumer --from-beginning --consumer.config config/consumer.properties

高级点的用法

bin/kafka-simple-consumer-shell.sh --brist localhost:9092 --topic test --partition 0 --offset 1234 --max-messages 10