Linux安装配置Flume

1.官网下载自己想要的flume版本,上传至linux并解压到自己想要安装的路径下

2.配置环境变量:vim /etc/profile

3.立即生效 source /etc/profile

找到自己的安装路径:

例如/opt/apache-flume-1.8.0-bin/conf,在此路径下vim example.conf,再copy以下配置

#example.conf:单节点Flume配置

#命名此代理上的组件
a1.sources=r1
a1.sinks=k1
a1.channels=c1

#描述/配置源
a1.sources.r1.type=netcat
a1。 sources.r1.bind=localhost
a1.sources.r1.port=44444

#描述sink
a1.sinks.k1.type=logger

#使用缓冲内存中事件的通道
a1.channels.c1.type=memory
a1.channels .c1.capacity=1000
a1.channels.c1.transactionCapacity=100

#将信源和信宿绑定到信道
a1.sources.r1.channels=c1
a1.sinks.k1.channel=c1

启动flume,在目录/opt/ apache-flume-1.6.0-bin下,运行flume

flume-ng agent -n a1 -f flume.conf -Dflume.root.logger=INFO,console
 

打开另一个连接终端,远程到44444端口,然后发送flume事件进行测试

telnet localhost 6666
 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
要在Linux服务器上安装Flume,您可以按照以下步骤进行操作: 1. 首先,确保您已经安装了Java Development Kit(JDK)和Apache Maven。您可以使用以下命令检查是否已安装: ``` java -version mvn -version ``` 2. 下载Flume的二进制文件。您可以从Apache Flume官方网站(https://flume.apache.org/)或Apache镜像站点(https://www.apache.org/dyn/closer.lua/flume/)下载。选择一个适合您的操作系统和版本的二进制文件进行下载。 3. 解压缩下载的文件。您可以使用以下命令将文件解压缩到所需的位置: ``` tar xzf apache-flume-<version>.tar.gz ``` 4. 在解压缩后的Flume目录,创建一个名为conf的子目录,并进入该目录: ``` mkdir conf cd conf ``` 5. 创建一个名为flume.conf的配置文件,并使用文本编辑器打开它: ``` vi flume.conf ``` 6. 在flume.conf文件配置Flume的代理(agent)和通道(channel)。这涉及到指定数据源、数据接收器和间传输方式等。根据您的需求和数据流程进行相应的配置。 7. 保存并关闭flume.conf文件。 8. 返回到Flume的根目录,并运行以下命令来启动Flume代理: ``` bin/flume-ng agent --conf conf --conf-file conf/flume.conf --name <agent-name> -Dflume.root.logger=INFO,console ``` 将`<agent-name>`替换为您为代理指定的名称。 9. Flume代理将开始运行并处理数据流。您可以根据配置的日志路径和其他输出方式来监视和验证Flume的工作情况。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值