Kafka系列之:读取Kafka Topic中的数据,根据获取的数据指定Kafka数据的stamp、key、value,再把数据写入到其他Kafka Topic中
一、明确需求
从一个Kafka Topic中获取到想要的数据后,再把数据以相同的数据格式写到另外一个Kafka Topic,要求保持数据格式一致,数据的stamp、key、value等要一致。
学会Java和Python与kafka交互,因此:
- Kafka消费者使用Python代码演示。
- Kafka生产者使用Java代码演示。
二、创建Kafka消费者
consumer = KafkaConsumer(
bootstrap_servers=kafkaBrokers,
client_id="debeziumTest",
group_id="debeziumTest",
auto_offset_reset=&