Kafka
文章平均质量分 75
Kafka
封闭火车
这个作者很懒,什么都没留下…
展开
-
Linux安装Kafka,并使用Flink连接读取Kafka
文章目录前言一、获取Kafka安装包二、安装步骤1.解压文件2.重命名3.设置环境变量4.使环境变量生效三、启动Kafka1.先启动ZooKeeper服务2.启动kafka服务3.创建一个名为"topTest"的topic4.打开Producer(生产者)服务5.打开Customer(消费者)服务四,Java连接kafka1.maven依赖2.实体类3.连接工具类4.运行五,Flink连接读取Kafka1.主方法类2.运行原创 2020-11-29 17:17:37 · 984 阅读 · 0 评论 -
利用maxwell进行mysql数据库日志抓取写入kafka
前言因为业务需要,对mysql数据变更进行实时抓取。maxwell可以对mysql数据库的二进制日志bin-log进行提取,并生成 JSON 格式的消息,作为生产者将它发送到kafka。原理mysql数据库有自己的bin-log,mysql通过bin-log实现mysql数据库的主从备份此处maxwell将自己伪装为slave(从节点),向MySQL主节点发送dump协议获取b...原创 2020-01-09 13:52:44 · 1074 阅读 · 0 评论