kafka性能测试

版本0.10.1.1

kafka  broker的JVM默认是使用1G的内存

./bin/kafka-producer-perf-test.sh --topic test-pati3-rep2 --throughput 500000 --num-records 1500000 --record-size 1000 --producer.config config/producer.properties --producer-props bootstrap.servers=10.1.8.16:9092,10.1.8.15:9092,10.1.8.14:9092 acks=1

包括ack=all 和ack=1两种测试，消息大小为1000，TPS大概为6W

修改JVM到4G后的压测

消息大小为1000或500 ack=1 TPS在消息大小为1k的时候大概是8W,消息大小为500的时候TPS大概为16W

由此可以看出此机器的瓶颈在硬盘上，而kafka对硬盘的性能要求最高，如有机会再SSD上进行一下测试，效果应该更好。