![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
文章平均质量分 65
Joker_Jiang3
码畜
展开
-
Maxwell实时同步MySQL数据到Kafka
Maxwell实时同步MySQL数据到Kafka原创 2023-03-13 22:35:03 · 1169 阅读 · 0 评论 -
Structured Streaming整合Kafka实时统计
Structured Streaming整合Kafka实时统计一、实时ETL启动Zookeeper和kafka# 启动zookeeperbin/zkServer.sh start# 启动kafkabin/kafka-server-start.sh -daemon config/server.properties创建主题bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --part原创 2021-07-12 12:18:40 · 661 阅读 · 3 评论 -
Spark Streaming整合Kafka及示例
Spark Streaming整合Kafka及示例Spark和kafka整合有2中方式 : Receiver 和 Dirct主要学习Dirct方式一、Receiver二、Direct三、代码演示完整pom文件<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/X原创 2021-07-06 09:33:28 · 343 阅读 · 0 评论 -
Kafka分布式集群部署
Kafka分布式集群部署1.集群规划在hadoop01、hadoop02和hadoop03三个节点上部署Kafka。我安装的版本是kafka_2.11-2.1.0.tgz,下载地址:http://archive.apache.org/dist/kafka2.解压安装(1)解压Kafka安装包到/opt/modules/目录下# 解压[jiang@hadoop01 software]$ tar -zxvf kafka_2.11-2.1.0.tgz -C /opt/modules/# 重命名[j原创 2021-05-28 22:41:23 · 299 阅读 · 0 评论