flume kafka sink kafka对接flume简单实现详解

最新推荐文章于 2024-04-17 08:49:55 发布

zyj_369

最新推荐文章于 2024-04-17 08:49:55 发布

阅读量2k

点赞数 2

分类专栏： kafka flume 文章标签： kafka flume

本文链接：https://blog.csdn.net/weixin_46122692/article/details/109298587

版权

本文详细介绍了如何使用Flume配置Kafka Sink，通过flume-kafka.properties配置文件设置，启动Flume收集数据，并利用Kafka消费者接收Flume传输的数据。同时，文中还模拟了数据生产过程，展示实际操作效果。

摘要由CSDN通过智能技术生成

1、flume的配置文件 kafka-sink.properties

# Name the components on this agent
# source:起一个别名
# properties文件它是java的配置文件,=左边就是键,=右边是值;键的开头都是以a1(就是flume的名字--agent的名字就是a1);a1随便起
a1.sources = r1
# sink:起一个别名
a1.sinks = k1
# channels;:起一个别名
a1.channels = c1

# Describe/configure the source
# a1(agent的名字).sources(来源).