Flume系列之:flume集成GooseFS的详细步骤
一、需求背景
- debezium采集数据库数据发送到Kafka Topic,flume消费Kafka Topic的数据落到GooseFS上
flume生产应用可以参考博主以下几篇博客,更多flume技术请移步博主flume专栏:
- flume系列之:flume消费数据量较大kafka Topic的source、channel、sink等参数通用设置
- flume系列之:flume配置写入zookeeper节点,根据zookeeper中flume配置启动flume agent
- flume专栏
二、深入了解GooseFS
GooseFS相关技术可以参考博主以下几篇博客: