kafka
yx️
这个作者很懒,什么都没留下…
展开
-
生产环境评估机器的方法
10亿请求->24小时过来的,一般情况下,每天晚上12:00到早上8:00这段时间其实是没有多大数据量的,80%的请求是用的另外16个小时处理的。学习了kafka的原理知识后,还要学会如何评估生产环境集群,如果是一个大数据架构师,这个是必须要会的,比如kafka集群、Hbase集群、hadoop集群,评估集群的方式差不多,现在以kafka为例。场景总结:搞定10亿请求,高峰期5.5万的qps,276T的数据,需要5台物理机。kafka里面的数据是有保存的时间周期的,假设保留最近3天的数据。原创 2023-11-02 18:22:58 · 255 阅读 · 0 评论 -
kafka生产者源码精华总结
kafka的源码阅读起来思路很清晰,命名也很规范。我们自己去设计一个系统的时候,可以借鉴以上思路。原创 2023-11-01 17:31:32 · 751 阅读 · 0 评论 -
kafka源码笔记
环境搭建参照:10 分搭建一个 Kafka 源码的调试环境,男保姆级教程! - 掘金原创 2023-07-12 19:52:08 · 72 阅读 · 0 评论 -
kafka分片和消费组的概念
略原创 2023-02-08 21:35:49 · 107 阅读 · 0 评论