![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Kafka
文章平均质量分 96
Wu_Init
这个作者很懒,什么都没留下…
展开
-
flink-流上的join (1.12.2)
flink-流上的join (1.12.2)一、简介本篇主要围绕flink table & sql进行实践。其中文章中大部分内容官方文档有详细记载。由于环境和代码编写问题,官方示例并不能完全用于代码实践,所以此篇文章通过kafka+mysql进行简单实践。环境:kafka 2.4flink 1.12.2mysql57java8二、时间属性首先对于实时join来说,第一个要讨论的就是时间属性。在flink sql中,给出了两种时间属性,一个是系统处理时间,一个是数据本身的自原创 2021-07-06 10:35:34 · 695 阅读 · 0 评论 -
《Debezium系列》Debezium-SqlServer的配置踩坑
之前有过关于其他debezium数据库的配置,现在带来sqlServer的配置和踩坑。话不多说,整起。。。。。首先,按照惯例,先官方地址(毕竟有了官方才有了我这个。。。。)官方传送门:debezium环境:kafka2.4 zookeeper3.5.6 sqlserver2017standard1.数据库配置需要为监控的数据库开启cdc功能以便debezium连接器能够获取日志文件。例如:USE MyDBGOEXEC sys.sp_cdc_ena原创 2020-08-21 15:20:06 · 7467 阅读 · 9 评论 -
Clickhouse Engine kafka 将kafka数据同步clickhouse
起因由于需要做各种数据库摆渡到kafka的组件研究。其中clickhouse和kafka间的数据摆渡,根据官方给出的kafka引擎文档,便有了我这篇实践记录。这边对数据库和kafka不再累述。一、版本特性原创 2020-06-28 11:08:16 · 14130 阅读 · 24 评论 -
Windows Oracle11g OGG to kafka
本文主要参考文档和博客如下:https://dongkelun.com/2018/05/23/oggOracle2Kafka/https://www.jianshu.com/p/b1e1fb623f15一、开发环境源端:Oracle Database 11g Enterprise Edition Release 11.2.0.1.0Oracle GoldenGat...原创 2020-04-18 10:06:13 · 1546 阅读 · 1 评论 -
《Debezium系列》Debezium-Connector-MongoDB副本集
目录一、简介1.1 起因1.2 Debezium1.3 使用场景2. 搭建实践2.1 版本说明2.2 芒果(mongodb)DB配置2.3 kafka connect配置2.4 提交2.5 测试3. 总结4. 后记一、简介1.1 起因这段时间在进行数据库的实时接入方面的工作,并且要求在kafka上进行数据的发布和接入,所以在领导的介绍下g...原创 2020-01-20 16:49:53 · 3874 阅读 · 4 评论