codemosi的专栏，点击我可以跳到目录一栏

Kafka是linkedin用于日志处理的分布式消息队列，linkedin的日志数据容量大，但对可靠性要求不高，其日志数据主要包括用户行为（登录、浏览、点击、分享、喜欢）以及系统运行日志（CPU、内存、磁盘、网络、系统及进程状态）。当前很多的消息队列服务提供可靠交付保证，并默认是即时消费（不适合离线）。高可靠交付对linkedin的日志不是必须的，故可通过降低可靠性来提高性能，同时通过构建

通常而言我们的kafka的配置如下所示：?12345678910111213141516broker.id=0num.network.threads=2num.io.threads=8socket

在windows下开发连接linux 中的kafka集群的，java api中容易忽略，导致出现如下错误kafka Failed to send messages after 3 tries.解决办法修改 C:\Windows\System32\drivers\etc\hosts# 127.0.0.1       localhost# ::1    

bin/kafka-list-topic.sh --zookeeper 192.168.197.170:2181,192.168.197.171:2181 （列出所有topic的分区情况）bin/kafka-list-topic.sh --zookeeper 192.168.197.170:2181,192.168.197.171:2181 --topic test （查看test的分区情况）

ack设置成-1 unclean设置为false就不丢数了，除非所有集群都同时挂，磁盘缓存没刷新再设置个mini isr=2更大保证一下如果你们ack设置的默认为1，那么切换leader的时候丢数很正常看你们的需求了，吞吐量跟性能做个平衡还有topic级别两个配置ack是生产者的unclean、mini isr是top