Kafka
文章平均质量分 83
Kafka实战及源码解析
Java识堂
这个作者很懒,什么都没留下…
展开
-
Kafka 集群搭建
安装镜像站下载:http://mirror.bit.edu.cn/apache/zookeeper/配置环境变量(我这里是用户级别) 进入conf目录,复制zoo_sample.cfg为zoo.cfg(必须是这个文件)修改zoo.cfg的dataDir目录为已经存在的目录vim ~/.bash_profileexport ZK_HOME=/root/zookeeper-3....原创 2018-04-17 17:48:49 · 2058 阅读 · 1 评论 -
Kafka 消息存储
创建topic 副本数为3 分区数位3 ./kafka-topics.sh --create --zookeeper s1:2181 --replication-factor 3 --partitions 3 --topic test # 创建topic 副本数为1 分区数位3 ./kafka-topics.sh --create --zookeeper s1:2181 --replication-factor 1 --partitions 3 --topic orders1s2s3。原创 2023-04-17 22:08:51 · 234 阅读 · 0 评论 -
Kafka 消息发送
参数名描述默认值格式为host1:port1,host2:port2,…retries0acks可选值为[all, -1, 0, 1]1batch.sizebatch的大小,默认为16kb,如果batch太小,会导致频繁网络请求,吞吐量下降,如果batch太大,会导致一条消息需要等待很久才能被发送出去16klinger.ms超过linger.ms指定的时间,batch还没满,也会被发送出去,避免消息的延迟太长0限制发送出去的消息大小1m。原创 2023-04-16 18:21:05 · 1146 阅读 · 0 评论 -
Kafka 消息消费
[0]https://learn.lianglianglee.com/%E4%B8%93%E6%A0%8F/Kafka%E6%A0%B8%E5%BF%83%E6%8A%80%E6%9C%AF%E4%B8%8E%E5%AE%9E%E6%88%98/18%20%20Kafka%E4%B8%AD%E4%BD%8D%E7%A7%BB%E6%8F%90%E4%BA%A4%E9%82%A3%E4%BA%9B%E4%BA%8B%E5%84%BF.md[1]https://juejin.cn/post/686482881原创 2023-04-08 16:43:52 · 444 阅读 · 0 评论 -
Kafka 性能调优
至少一次(At Least Once)= ack级别设置为-1+分区副本大于等于2+ISR里应答的最小副本数量大于等于2。生产者如何提高吞吐量。原创 2023-04-29 11:23:01 · 940 阅读 · 0 评论 -
Kafka 线上问题
事情的起因是专员在 ze app 上查不到订单了,而订单数据是从 mysql 的 order_search_info 查询的,order_search_info 表的数据是从 oracel 的 BZ_ORDER_INFO 表同步过来的,查不到说明同步有问题。每消费一次订单表的数据,就会新创建一个线程池,核心线程数为10,不断创建线程导致内存和CPU不断飙升,消息不能正常消费,后续消费消息改成使用一个固定的现成池后,消息正常消费。首先看日志,有如下两种情况。而 CPU 持续飙升的容器,消费的是订单表的数据。原创 2024-01-17 16:02:33 · 860 阅读 · 0 评论 -
Kafka 源码阅读
1]原创 2023-04-08 15:39:24 · 129 阅读 · 0 评论