kafka
文章平均质量分 80
im_cheer
这个作者很懒,什么都没留下…
展开
-
Kafka Connect JdbcSinkConnector的schema处理
1.使用Confluent Schema Registry 在写入kafka时,就用Avro、Protobuf 或 JSON Schema的converter进行schema的转换。kafka connect当写入到Mysql这类的关系型数据库时,使用JdbcSinkConnector,且kafka中的数据需要具备schemas,否则是无法写入的。使用JdbcSourceConnector接入数据时,就使用AvroConverter进行处理,并指定schema.registry的服务器。原创 2023-06-16 00:23:07 · 1484 阅读 · 0 评论 -
基于log的数据同步与算法
At its heart a Kafka partition is a replicated log. The replicated log is one of the most basic primitives in distributed data systems, and there are many approaches for implementing one. A replicated...原创 2019-05-05 17:21:48 · 296 阅读 · 0 评论