![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
文章平均质量分 95
王胖泽
这个作者很懒,什么都没留下…
展开
-
<Kafka核心技术与实战>学习笔记 -- 管理与监控
主题管理知多少?主题日常管理创建主题创建 Kafka 主题命令Kafka 提供了自带的 kafka-topics 脚本,用于帮助用户创建主题位于 Kafka 安装目录的 bin 子目录下。 Windows 位于 bin 路径的 windows 子目录下bin/kafka-topics.sh --bootstrap-server broker_host:port --create 创建主题 --topic my_topic_name --partitions 1 主题的分区数 --原创 2021-10-18 20:22:53 · 667 阅读 · 0 评论 -
<Kafka核心技术与实战>学习笔记 -- 深入Kafka内核
<Kafka核心技术与实战>学习笔记 -- 深入Kafka内核Kafka副本机制详解副本定义副本角色Kafka副本机制详解副本机制(Replication),备份机制,通常是指分布式系统在多台网络互联的机器上保存有相同的数据拷贝副本机制的好处:提供数据冗余。即使系统部分组件失效,系统依然能够继续运转,因而增加了整体可用性以及数据持久性提供高伸缩性。支持横向扩展,能够通过增加机器的方式来提升读性能,进而提高读操作吞吐量改善数据局部性。允许将数据放入与用户地理位置相近的地方,从而降低系统延时目原创 2021-08-31 21:27:35 · 689 阅读 · 0 评论 -
<Kafka核心技术与实战>学习笔记 -- 客户端实践 & 原理剖析
<Kafka核心技术与实战>学习笔记 -- 客户端实践 & 原理剖析生产者消息分区机制为什么分区?Kafka 生产者的分区策略自定义分区策略分区策略 -- 轮询分区策略 -- 随机按消息键保序策略其他分区策略小结生产者压缩算法怎么压缩何时压缩何时解压缩各种压缩算法对比实践小结无消息丢失配置消息丢失 -- 生产者程序丢失数据消息丢失 -- 消费者程序丢失数据客户端都有哪些不常见但是很高级的功能?Java生产者是如何管理TCP连接的?幂等生产者和事务生产者是一回事吗?消费者组到底是什么?生产者消息分区原创 2021-08-14 10:56:00 · 535 阅读 · 0 评论 -
<Kafka核心技术与实战>学习笔记 -- 集群部署方案&参数配置
Kafka线上集群部署方案考虑 操作系统、磁盘、磁盘容量和带宽操作系统Kafka 由 Scala 语言和 Java 语言编写而成,编译之后的源代码就是普通的“.class”文件部署在linux上的三个优势I/O 模型的使用I/O 模型与 Kafka 的关系Kafka 客户端底层使用了 Java 的 selector,selector 在 Linux 上的实现机制是 epoll,而在 Windows 平台上的实现机制是 select因此将 Kafka 部署在 Linux 上是有优势的,因为能原创 2021-08-12 11:44:12 · 299 阅读 · 0 评论 -
<Kafka核心技术与实战>学习笔记
为什么学习kafka对于数据密集型应用来说:数据量激增: Kafka 能够有效隔离上下游业务,将上游突增的流量缓存起来,以平滑的方式传导到下游子系统中,避免了流量的不规则冲击数据复杂度增加数据变化速率变快可以实现:消息引擎应用应用程序集成分布式存储构建流处理应用的开发与部署...原创 2021-04-02 10:13:39 · 324 阅读 · 0 评论