利用pykafka压力测试kafka,利用了多进程模式,根据自己机器调高进程数;
with topic.get_producer(delivery_reports=True) as producer:
如果使用上面的delivery_reports=True配置,能到达每秒几百兆的并发量,但是内存会持续暴涨;(此问题待解决)
with topic.get_producer(sync=True) as producer:
如果使用上面的sync=True配置,并发量只有几十KB,因为要等kafka存好数据返回才进行下一循环;
pykafka压力测试kafka源码下载链接:https://download.csdn.net/download/lucia555/10686980
有问题加QQ群:877769335
或者用QQ扫描二维码加群: