Kafka
文章平均质量分 92
Stray_Lambs
这个作者很懒,什么都没留下…
展开
-
Kafka常见面试——附答案
系列文章目录提示:这里可以添加系列文章的所有文章的目录,目录需要自己手动添加例如:第一章 Python 机器学习入门之pandas的使用提示:写完文章后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录系列文章目录 前言 一、pandas是什么? 二、使用步骤 1.引入库 2.读入数据 总结前言提示:这里可以添加本文要记录的大概内容:例如:随着人工智能的不断发展,机器学习这门技术也越来越重要,很多人都开启了学习机器学习,本文就介绍了机器学习..原创 2021-05-31 17:07:19 · 661 阅读 · 0 评论 -
Kafka架构深入——Kafka消费者
Kafka架构深入——Kafka消费者消费者定义简单说一下什么是消费者。其实消费者就是从Kafka集群当中消费数据的客户端。当然,一个消费者的消费能力肯定是有限的,所以,当生产者产生数据过快时,单个消费者的消费能力达到上限,导致了Kafka集群消费数据的堆压。从而也就产生了消费者组的概念(一个不够,一群来凑....)。一个消费者组具有若干个消费者(具有相同的group.id),我们可以将消费者组看成是一个大的消费者,同一个topic的分区只能被组内的一个消费者消费一次,不允许多次消费...原创 2021-05-28 17:52:04 · 464 阅读 · 1 评论 -
Kafka架构深入——Kafka生产者
目录Kafka生产者分区策略分区的原因分区原则新建的分区会在哪个目录下创建数据可靠性保证ISR机制ack应答机制(决定数据丢不丢)故障处理细节Exactly Once 语义参考Kafka生产者分区策略通常情况下,kafka集群中越多的partition会带来越高的吞吐量。但是,我们必须意识到集群的partition总量过大或者单个broker节点partition过多,都会对系统的可用性和消息延迟带来潜在的影响。未来,我们计划对这些限制进行一些改进,让原创 2021-05-25 20:18:10 · 330 阅读 · 4 评论 -
Kafka架构深入——工作流程
test原创 2021-05-24 17:42:55 · 167 阅读 · 0 评论 -
Kafka基本理解
Kafka基本理解一、Kafka定义二、使用步骤1.引入库2.读入数据总结一、Kafka定义二、使用步骤1.引入库代码如下(示例):import numpy as npimport pandas as pdimport matplotlib.pyplot as pltimport seaborn as snsimport warningswarnings.filterwarnings('ignore')import sslssl._create_default_https_con原创 2021-05-21 15:54:38 · 219 阅读 · 3 评论