Python测试Kafka集群是否可用

from kafka import KafkaProducer, KafkaConsumer
import time
import json
topic = 'my-topic'

def test_consumer():
    consumer = KafkaConsumer(topic, group_id='test_id', enable_auto_commit=True, auto_commit_interval_ms=5000, bootstrap_servers=['xxxxx:30901', 'xxxx:30902', 'xxxx:30903'])
    for message in consumer:
        yield message


def get_data():
    message = test_consumer()
    for msg in message:
        try:
            msg_json = json.loads(msg.value.decode('utf-8'))
            key = msg.key.decode()
            print(msg_json)
        except Exception as e:
            print(e)

def test_producer():
    print('begin')
    n = time.time()
    producer = KafkaProducer(bootstrap_servers=['xxxxx:30901', 'xxxx:30902', 'xxxx:30903'])
    msg = {"send" : str(n)}
    parmas_message = json.dumps(msg)
    # producer.send(topic, parmas_message.encode('utf-8'))
    producer.send(topic, key=bytes("send", encoding='utf-8'), value=bytes(parmas_message, encoding='utf-8'))
    print ("send" + str(n))
    time.sleep(0.5)
    print('done')


if __name__ == '__main__':
    # test_producer()
    # test_consumer()
    get_data()

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

**星光*

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值