flume1.9.0安装配置（伪分布式）

最新推荐文章于 2024-08-02 10:40:37 发布
最新推荐文章于 2024-08-02 10:40:37 发布
阅读量800 收藏 11
点赞数 1
分类专栏： Hadoop集群组件 文章标签： centos
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43548210/article/details/102831094
版权
本文档详细介绍了在CentOS上安装配置Flume 1.9.0的伪分布式步骤，包括上传和解压软件包，修改环境变量，配置flume-env.sh文件，创建并编辑agent.conf，最后启动Flume服务。
摘要由CSDN通过智能技术生成

安装flume伪分布式

上传apache-flume-1.9.0-bin.tar.gz到根目录/root/

进入路径/usr/local/,在该路径下解压apache-flume-1.9.0-bin.tar.gz

tar -zxvf /root/apache-flume-1.9.0-bin.tar.gz
在这里插入图片描述
ls查看是否解压成功
在这里插入图片描述
重命名apache-flume-1.9.0-bin为flume
mv apache-flume-1.9.0-bin flume
在这里插入图片描述
进入/etc/profile/修改环境变量

vi /etc/profile
在这里插入图片描述
添加以下内容：

export 	FLUME_HOME=/usr/local/flume
export PATH=$PATH:$FLUME_HOME/bin

最低0.47元/天 解锁文章
不秃头的智慧女孩
关注
专栏目录
hadoop配置Flume
kebike_zhe的博客
12-13 1184
一、解压 cd /usr/local/sof tar -zxvf apache-flume-1.9.0-bin.tar.gz 二、添加系统环境变量 vi /etc/profile export FLUME_HOME=/usr/local/soft/apache-flume-1.9.0-bin export PATH=$PATH:$FLUME_HOME/bin source /etc/profile 三、修改Flume环境变量 cd /usr/lo
Flume1.9.0配置
J_qing3的博客
12-09 1687
以下内容中出现的/opt/module 全部为自己电脑上的文件夹路径 下载文件，将其拉至software中 然后将其解压至module 命令： cd /opt/software tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /opt/module 配置环境变量 命令： vi /etc/profile 在其最后添加内容export FLUME_HOME=/opt/module/apache-flume-1.9.0-bin export PATH=$PATH:$FL.
Flume1.9.0配置与简单使用
最新发布
taogumo的专栏
08-02 290
将apache-flume-1.9.0-bin.tar.gz软件包上传至/usr/local/soft文件夹下。#分别指定agent的sources，sinks, channels的名称 名称可以自定义。客户端(Source)：收集信息。-c:配置文件路径conf。-n:agent名称。
hadoop的Flume配置
weixin_59601631的博客
12-08 299
hadoop的Flume配置
flume伪分布式安装
weixin_30896825的博客
02-21 205
flume伪分布式安装： 1、导包：apache-flume-1.7.0-bin.tar.gz 2、配置环境变量：/etc/profile export FLUME_HOME=/yang/apache-flume-1.7.0-bin export PATH=$PATH:$FLUME_HOME/bin 3、在conf目录下创建example.conf的空文件： # a1是给这...
flume伪分布式部署和测试
caodaoxi的专栏
05-05 234
http://abloz.com 前一篇《flume日志收集单节点》，讲了怎么安装flume，对单节点模式进行了测试。本篇讲flume伪分布式部署和测试 flume包括3种节点，一种是agent，一种是collector，一种是master。master用于管理agent和collector。agent和collector是完全一样的，都是从source拉数据，往sink 推数据。所以其不同完...
Flume+Kafka+Strom基于伪分布式环境的结合使用
dianbutang4605的博客
08-19 204
目录： 　　一、Flume、Kafka、Storm是什么,如何安装? 　　二、Flume、Kafka、Storm如何结合使用？ 　　　　1) 原理是什么？ 　　　　2) Flume和Kafka的整合 　　　　3) Kafka和Storm的整合 　　　　4) Flume、Kafka、Storm的整合 　　一、Flume、Kafka、Storm是什么，如何安装?...
Flume1.9.0配置.docx
09-14
Flume 是一个分布式、可靠、可扩展的日志聚合系统，可以从各种数据源中收集数据，并将其传输到目标系统中，本文将对 Flume 1.9.0 的配置进行详细的介绍。 一、Flume 的安装和环境配置 在安装 Flume 之前，需要安装...
apache-flume-1.9.0-bin.tar.gz
07-28
描述中的 "编译好的flume1.9.0，下载安装即可使用" 提醒我们，该文件包含的 Flume 实例是已经准备好运行的，只需遵循安装步骤，就可以在你的系统上快速部署和启动 Flume 服务。 在标签中，"flume" 和 "flume1.9.0" ...
apache-flume-1.9.0-bin.tar.zip
10-07
Apache Flume 是一个分布式、可靠且可用于有效收集、聚合和移动大量日志数据的系统。它设计用于处理和传输大规模的日志数据，是大数据生态系统中的重要组件，常用于实时流数据处理。Apache Flume 1.9.0 版本是该软件...
Flume1.8安装部署
04-23
Flume1.8安装部署，包含目录结构为1、下载地址，安装环境工具下载地址 2、单个Flume安装 3、多个Flume安装及HA 4、应用场景 5、Flume-Ng组件概述
flume1.9.0连接sql8.0.11到Kafka，CDH6.2.1环境的jar包
01-25
flume1.9.0连接sql8.0.11到Kafka，CDH6.2.1环境的jar包
Flume1.5.0的安装、部署、简单应用(含伪分布式、与hadoop2.2.0、hbase0.96的案例
风流小子的专栏
11-04 1208
目录： 　　一、什么是Flume? 　　　　1)flume的特点 　　　　2)flume的可靠性 　　　　3)flume的可恢复性 　　　　4)flume 的 一些核心概念 　　二、flume的官方网站在哪里？ 　　三、在哪里下载？ 　　四、如何安装？ 　　五、flume的案例 　　　　1)案例1：Avro 　　　　2)案例2：Spool 　　　　3)案例3：Exec 　
flume1.9.0配置
m0_64966978的博客
12-14 1198
一、解压cd /usr/local/softtar -zxvf apache-flume-1.9.0-bin.tar.gz 二、添加系统环境变量(需配置Java JDK系统参数)vi /etc/profileexport FLUME_HOME=/usr/local/soft/apache-flume-1.9.0-binexport PATH=PATH:PATH:PATH:FLUME_HOME/binsource /etc/profile 三、修改Flume环境变量cd /usr/local/soft/apa
Flume1.9.0安装配置
2301_76741492的博客
06-08 155
1. 使用Xshell工具上传apache-zookeeper-3.5.7-bin.tar.gz到/opt/module目录下。flume安装完成！
Flume【付诸实践 01】flume1.9.0版 配置格式说明+常用案例分享（ExecSource+SpoolingDirectorySource+HDFSSink+AvroSourceSink）
シ風
08-24 491
Flume的配置文件就是类似与Kettle的ktr或者kjb，从哪里获取数据怎么处理录到哪里都是通过配置文件进行描述的，官方《Flume 1.9.0 User Guide》已经很详细了，各种sources、channels、sinks都有相当详细的配置说明和demo举例，我们这里弄几个常用的案例进行测试说明。 1.配置格式 配置通常需要【定义】和【绑定】两个部分，放在哪里就是个人习惯了，我习惯定义在上，绑定在下： 定义 Agent 的 Sources，Channels，Sinks 及其具体参数【参数可以从
安装伪分布式hadoop+flume+kafka+spark
qq_50344083的博客
04-14 313
1、无脑下一步嘿嘿2、下拉选择相应版本，我是 CentOS 73、起个名字然后选个地址安装（一般默认在C盘，我的系统被我搞坏了，所以我是随便装的）4、大小随意，我的意见是需求多大装多大5、按需分配之随便搞一下6、我的意见是可以照着我的抄哈哈哈，记得下一个iso印像文件7、然后开始安装，进入这个界面 配一下网8、直接打开就行，可以直接在这里改主机名，很方便9、直接安装吧，待会给root用户写个密码就差不多了。
Flume的安装部署
weixin_45568872的博客
02-19 217
一. 概述 Flume定义 Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力 。 Flume的优点 1). 可以和任意存储进程集成(灵活，数据源多样化) 2). 当输入的数据速率大于写入目的存储的速率时，flume会进行缓...
flume1.9.0安装gcc错误
06-07
flume 1.9.0 是一个数据采集工具，安装时需要确保系统中已经安装了 gcc 编译器和相关的开发库，否则会出现安装错误。如果出现了 gcc 相关的安装错误，可以尝试以下解决方案： 1. 确认系统中是否已经安装了 gcc 和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值