Flume案例一:监控 netcat 端口数据案例

本文介绍了使用Flume 1.9.0版本构建一个监控netcat端口数据的案例,配置了netcat-source、memory-channel和logger-sink。通过在本地启动netcat服务发送数据,Flume成功捕获并以logger方式输出,展示了Flume的基本数据传输流程。
摘要由CSDN通过智能技术生成

本文接上篇博客:Flume介绍、安装、使用案例、自定义Source/Sink、监控
Flume 版本:1.9.0

1.监控 netcat 端口数据案例

选型:netcat source + memory channel + logger sink

文档参考:
netcat-tcp-sourcehttp://flume.apache.org/releases/content/1.9.0/FlumeUserGuide.html#netcat-tcp-source
memory channelhttp://flume.apache.org/releases/content/1.9.0/FlumeUserGuide.html#memory-channel
logger sinkhttp://flume.apache.org/releases/content/1.9.0/FlumeUserGuide.html#logger-sink

2.需求图示

在这里插入图片描述

3.flume配置

flume-netcat-logger.conf

# Name the components on this agent
a1.sources = r1
a1.sinks = k1
a1.channels = c1

# Describe/configure the source
a1.sources.r1.type = netcat
a1.sources.r1.bind = localhost
a1.sources.r1.port = 44444

# Describe the sink
a1.sinks.k1.type = logger

# Use a channel which buffers events in memory
a1.channels.c1.type = memory
a1.channels.c1.capacity = 10000
a1.channels.c1.transactionCapacity = 10000
a1.channels.c1.byteCapacityBufferPercentage = 20
a1.channels.c1.byteCapacity = 800000

# Bind the source and sink to the channel
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1

4.启动命令

bin/flume-ng agent -c conf -n a1 -f job/flume-netcat-logger.conf -Dflume.root.logger=INFO,console

5.测试图示

netcat 发送数据,flume 端能够正常接收,通过 logger 方式输出,如图所示:

在这里插入图片描述


博主写作不易,加个关注呗

求关注、求点赞,加个关注不迷路 ヾ(◍°∇°◍)ノ゙

我不能保证所写的内容都正确,但是可以保证不复制、不粘贴。保证每一句话、每一行代码都是亲手敲过的,错误也请指出,望轻喷 Thanks♪(・ω・)ノ

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

扛麻袋的少年

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值