![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
文章平均质量分 91
我一拳打弯你A柱
7200 干他!
展开
-
kafka 2.7 单机启动步骤、kafka-connect配置
kafka 2.7 单机启动步骤、kafka-connect配置有点忘记了,所以要重新记录kafka单机启动步骤,首先是下载kafka.tar.gz包,然后解压,不需要进行任何配置,就可以进行下面的操作了。1、kafka 2.7 单机启动步骤整体的流程是,先启动zookeeper,然后启动kafka-server,最后就可以启动生产者消费者什么的了。1.1 启动zookeeper进入bin$ bin/zookeeper-server-start.sh config/zookeeper.prope原创 2021-04-11 12:14:39 · 1614 阅读 · 0 评论 -
一步步实现kafka-connect官方案例FileStream
一步步完成Kafka Connect官方案例FileStreamConnector大家好,我是一拳就能打爆帕萨特A柱的一拳超人之前看了Kafka Connect组件的设计,算是大概了解其中的结构了。Connect是一个高级抽象组件,基于该组件可以DIY出许多数据源的连接器。今天我打算照着Connector开发者指南一步步地实现指南中的Connector。接下来分为下面几个部分:1、FileStreamConnector介绍,2、程序编写,3、打包部署测试。1、FileStreamConnector介绍原创 2021-02-24 18:41:23 · 1072 阅读 · 0 评论 -
关于kafka-connect的一些理解
关于kafka-connect的一些理解大家好,我是一拳就能打爆A柱的一拳超人这个礼拜我去了解了kafka-connect,相信各位应该了解过Confluent,也可能用过一些功能。我之前使用Confluent是因为这个平台可以做自定义数据拉取,通过配置可以对许多数据源的数据做增量查询。但是经过这段时间的了解,我发现其实并不需要confluent平台,只需要其中的一个组件,也就是kafka-connect。kafka-connect-jdbc是基于kafka-connect开源项目开发出来的可以适配所有原创 2021-02-24 14:30:48 · 1692 阅读 · 0 评论 -
Confluent6.0平台搭建
Confluent6.0平台搭建大家好,我是一拳就能打爆A柱的男人我搭Confluent的时候也遇上很多问题,所以我也不希望各位把坑都踩一遍,所以给大家带来这篇搭建流程。大家一定要多看官方的文档,里面文件虽然很乱,但是确实有整体的搭建流程。我建议各位一边看这篇博客,一边搭配官方文档来做!1. 环境介绍版本其他LinuxCentOS 6.10内存:2GBJDK1.8.0_1412. Confluent6.0下载进入Confluent官网 点击右上角GET S原创 2020-12-09 18:55:42 · 1480 阅读 · 0 评论 -
Confluent 5.0 连接JDBC遇到的问题
Confluent 5.0 连接JDBC遇到的问题大家好,我是一拳背A柱大弯的男人这个礼拜直接原地爆炸,本周需要搭建Confluent平台并且通过JDBC连接数据源。我选择连接MySQL进行测试,但是在配置过程中遇到了问题,接下来我给大家讲一下我遇到的问题。接下来我将详细汇报一下目前遇到的问题。经过查询 Confluent 的文档我找到 Getting Started with Kafka Connect 这份用户手册,里面介绍了 Kafka Connect 能够连接多种数据源,并且可以在单机和集原创 2020-12-01 21:55:51 · 760 阅读 · 3 评论 -
kafka-0.8介绍、安装、常用指令
kafka-0.8介绍、安装、常用指令大家好,我是W今天给大家带来Kafka的介绍、安装及其常用指令,我也是最近这段时间才学习到kafka,所以理解不深也无法给大家带来更深刻的东西,希望这篇博客对大家有用。我学习Kafka的时候是在学习Spark-Streaming的时候顺便学习的,下面我们的顺序是:Kafka的介绍、Kafka的安装、Kafka相关命令。1、 Kafka介绍Kafka是由Linkedin公司开发的基于zookeeper协调的分布式、支持分区、支持多副本的分布式消息系统,是一种高吞吐原创 2020-11-17 20:30:31 · 455 阅读 · 0 评论