之后我们自己制作一个python的kafka 生产者,python版的kafka的消费者,即flume的agend也不用控制台。
首先启动pycharm,在pycharm需要安装
安装完成后python文件就可以导入包
from kafka import KafkaProducer
启动zookeeper
python中的代码
from kafka import KafkaProducer
producer= KafkaProducer(bootstrap_servers='python2:9092')
while True:
msg=input("输入消息 或:bye 退出")
if "bye"==msg:
print("欢迎使用,程序退出")
break
#send 发送
producer.send('cctv1',msg.encode())
接下来 vi/config/kafka1.properties
./bin/kafka-server-start.sh config/kafka1.properties 启动kafka1
然后在启动一个消费者:
./bin/kafka-console-consumer.sh --bootstrap-server python2:9092 --topic cctv1
上方python版的生产者,接着我们实现python版的消费者,在python中发消息,发完消息会走到linux 系统,然后linux系统在走到windows系统python,然后python在把数据保存在哪儿的一个过程。
接着启动python中的consumer
在我们之前在python中的produce生产者给python中consumer发消息就能接收到