![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
文章平均质量分 79
羽落风起
乐观积极的生活,用梦想浇灌希望的种子,不管风和日,还是狂风暴雨,活出自己的色彩。
展开
-
kafka(六):java API消费数据
java读取kafka数据原创 2022-09-16 15:37:40 · 791 阅读 · 0 评论 -
kafka(五):消费组信息提取
文章目录说明分享环境实现maven代码总结2021-09-17说明本博客每周五更新一次。本文功能性博文,提取kafka所有消费组相关信息,整理后,提供为prometheus。分享大数据博客列表环境kafka2.3.0实现maven<dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka-clients</artifactI原创 2021-09-17 12:41:58 · 349 阅读 · 0 评论 -
kafka(四):kafka javaAPI入库程序
文章目录说明讲解maven导包连接kafkakerberos认证方式一方式二应用总结说明本博客每周五更新一次。本博客主要介绍java代码实现kafka数据入库的代码实现,并包含kerberos认证实现。kafka版本为2.3.0讲解maven导包<dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka-clients</artifactId原创 2021-04-09 12:40:38 · 436 阅读 · 0 评论 -
kafka(三):win10搭建kafka环境
文章目录说明运行环境搭建步骤下载安装包配置安装配置server.properties说明启动启动zookeeper启动kafkakafka脚本脚本说明脚本使用kafka功能测试端口说明创建topic主题创建生产者创建消费者kafka版本兼容性总结说明本博客每周五更新一次。本片博文主要介绍win10安装kafka过程,官方脚本说明和数据生成、接受测试,实践性强。运行环境jdk 1.8kafka 2.4.1scala 2.12搭建步骤下载安装包下载kafka 地址 官方版内置zk原创 2021-04-01 12:26:59 · 3267 阅读 · 7 评论 -
kafka(二):kafka分区、生产和消费详解
文章目录说明kafka分区说明kafka分区结构kafka分区策略官方分区策略轮询策略随机策略按消息键保序策略基于地理位置的分区策略自定义分区策略kafka分区存储策略kafka分区消息保序存储消息保序消费消息保序消息路由策略消息生产过程总结说明本博客每周五更新一次。上篇介绍了kafka的基础架构,本文将详细介绍kafka分区说明、分区结构和分区策略,以及消费保序,以及生产和消费过程。理论知识较多,如果追求快速上手直接使用,可跳过本文。kafka分区说明分区规则指的是将每个Topic划分成多原创 2021-03-26 09:14:26 · 733 阅读 · 0 评论 -
kafka(一):介绍和架构、应用场景和同类型比对
文章目录说明kafka简介什么是kafkakafka高吞吐率实现kafka消息传递模式点对点模型发布/订阅模型kafka优点kafka架构架构图主要构成RecordTOPICpartitionBrokerproducerConsumerConsumer Grouppartition ReplicaPartition LeaderPartition FollowerZookeeper应用场景存储系统消息传递系统流处理同类型比对FlumeRabbitMQRedisZeroMQActiveMQRocketMQ总结原创 2021-03-19 15:57:48 · 645 阅读 · 2 评论