pykafa Producer get_producer 5秒发送一次消息,__consumer_offsets生成大量日志问题
python 通过 pykafka 发送数据和消费数据,遇到两个问题,与大家分享下。
问题1
1. 通过pykafa 发送数据时候,每隔5s才发送一次,几百万数据,效率大大影响。
生产者只有get_producer 方法,当前参数 ack_timeout_ms=1000, linger_ms=5000只有两个。
查询官网 https://pykafka.readthedocs.io/en/...
原创
2019-09-30 15:49:57 ·
972 阅读 ·
1 评论