【kafka】伪分布式安装配置

安装过程

上传解压
配置
	**conf/server.properties**
	配置唯一标识符
		第20行
		broker.id=9092
	配置Broker端口
		第25行
		port=9092
	配置Broker运行主机名称
		第28行
		host.name=【主机名】
	配置日志文件存储目录
		第58行
		log.dirs=/opt/modules/kafka_2.11-0.8.2.1/kafkaDatas/data9092
	配置ZK地址以及存储ZNode根目录
		第118行
		zookeeper.connect=【主机名】:2181/kafka
复制server.properties，分别为server9092.properties
			server9093.properties,
			server9094.properties
	记得修改对应broker ID，port,日志目录

启动服务
需要先启动Zookeeper
bin/zkServer.sh start
启动kafka进程
bin/kafka-server-start.sh -daemon config/server9092.properties bin/kafka-server-start.sh -daemon config/server9093.properties bin/kafka-server-start.sh -daemon config/server9094.properties
创建topic

bin/kafka-topics.sh --create --zookeeper bigdata-hpsk01.huadian.com/kafka --replication-factor 2 --partitions 3 --topic testTopic

--replication-factor：副本数 ，需要<Brokers 数量
--partitions：分区数

查看Kafka Cluster中有多少topic

bin/kafka-topics.sh --list --zookeeper bigdata-hpsk01.huadian.com/kafka

模拟生产者发送数据到Topic中

bin/kafka-console-producer.sh --broker-list bigdata-hpsk01.huadian.com:9092,bigdata-hpsk01.huadian.com:9093,bigdata-hpsk01.huadian.com:9094 --topic testTopic

模拟消费者消费Topic中数据

bin/kafka-console-consumer.sh --zookeeper bigdata-hpsk01.huadian.com/kafka --topic testTopic --from-beginning