flume安装教程(欢迎指教)

最新推荐文章于 2024-05-11 19:20:03 发布
最新推荐文章于 2024-05-11 19:20:03 发布
阅读量181 收藏
点赞数
分类专栏： 大数据系列 文章标签： flume apache linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43813200/article/details/121004798
版权

flume 安装

1.下载并解压 apache-flume-1.6.0-bin.tar.gz

tar -zxvf apache-flume-1.6.0-bin.tar.gz

2.进入conf

cd apache-flume-1.6.0-bin/conf
cp flume-env.sh.template flume-env.sh
## 修改flume-env.sh
## 添加
JAVA_HOME=/usr/java/jdk1.8.0_231-amd64

3.修改环境变量

vim /etc/profile
## 添加环境变量
export FLUME_HOME=/opt/apache-flume-1.6.0-bin
export PATH=$FLUME_HOME/bin:$PATH

4.重载环境变量

source /etc/profile

5.检验flume 状态

flume-ng version

未完待续

如若有谬误，请同道指出来，让我们共同进步，day day up ! ! 笔芯

武念
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Flume的安装使用教程，详细带图
weixin_44912627的博客
07-19 2400
一、Flume的概念： Flume是Cloudera提供的一个高可用，高可靠的，分布式的海量日志采集，聚合和传输的系统。Flumens基于流式架构，灵活简单。 Flume最主要的作用就是实时的读取服务器本地磁盘的数据，然后上传到HDFS（虽然也可以直接从服务器本地上传，但是不是实时的）。 二、Flume组成架构： 1.Agent Agent是一个JVM进程，它以事件的形式将数据从源头送至目的，是Flume数据传输的基本单元。启动agent之后，进程名称：Application Agent主要有3个部分组
Flume详解与安装部署教程
01-07
1、Flume概述 在一个完整的离线大数据处理系统中，除了hdfs+mapreduce+hive组成分析系统的核心之外，还需要数据采集、结果数据导出、任务调度等不可或缺的辅助系统，而这些辅助工具在hadoop生态体系中都有便捷的...
flume的安装与配置
qq_60968494的博客
04-03 2544
flume的详细安装与配置
Flume安装部署及使用
xtsheng123456的博客
10-27 423
Aapche Flume是由Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的软件，网址： http://flume.apache.org/Apache Flume的核心是把数据从数据源(source)收集过来，再将收集到的数据送到指定的目的地(sink)。为了保证输送的过程一定成功，在送到目的地(sink)之前，会先缓存数据(channel)，待数据真正到达目的地(sink)后，flume在删除自己缓存的数据。
大数据最全【数仓】flume软件安装及配置_flume的安装配置(1)，2024年最新客户端开发面试题目
最新发布
2401_84586524的博客
05-11 1771
既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上大数据知识点，真正体系化！由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新需要这份系统化资料的朋友，可以戳这里获取tar -xzvf apache-flume-1.11.0-bin.tar.gz mv apache-flume-1.11.0-bin/ /data/flume/ export FLUME_HOME=/data/flu
Flume的安装及使用
weixin_44624060的博客
07-11 2119
Flume的安装及使用 文章目录Flume的安装及使用Flume的安装1、上传至虚拟机，并解压2、重命名目录，并配置环境变量3、查看flume版本4、测试flume5、flume的使用 Flume的安装 1、上传至虚拟机，并解压 tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /usr/local/soft/ 在环境变量中增加如下命令，可以使用 soft 快速切换到 /usr/local/soft alias soft=‘cd /usr/local/soft/’ 2、
flume安装教程
Andy86666的博客
11-28 692
（谷歌开发的工具包，但是和其他的组件的版本不统一）进行到flume的安装路径中，需要修改conf中。，并在里面添加JDK的路径。
Flume安装详细步骤
11-30
Flume安装详细步骤 Flume是一款基于Java的分布式日志收集系统，主要用于收集和传输大规模日志数据。下面是Flume安装的详细步骤： Step 1: 安装JDK环境 在安装Flume之前，需要确保JDK环境已经安装。这里我们使用...
Flume安装和简单使用
01-07
Flume安装和简单使用Flume简介Flume安装Flume框架示例 Flume简介 来自官网 Flume is a distributed, reliable, and available service for efficiently collecting, aggregating, and moving large amounts of log ...
flume安装程序
12-10
请解压后再用，flume-1.6.0-bin.tar 安装包，希望对大家有用。
flume视频教程
04-10
完整的flume视频教程 视频方式为百度网盘 下载文件中提供了下载链接和提取码
flume-ng-1.6.0-cdh5.13.2
12-19
CDH版本的flume Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。 当前Flume有两个版本Flume 0.9X版本的统称Flume-og，Flume1.X版本的统称Flume-ng。由于Flume-ng经过重大重构，与Flume-og有很大不同，使用时请注意区分。
Flume安装与使用
weixin_72036027的博客
03-10 735
flume概念和使用
Apache Flume : 简单案例
12-04 4005
采集目录到HDFS 采集需求：服务器的某特定目录下，会不断产生新的文件，每当有新文件出现，就需要把文件采集到HDFS中去 根据需求，首先定义以下3大要素 采集源，即source——监控文件目录 : spooldir 下沉目标，即sink——HDFS文件系统 : hdfs sink source和sink之间的传递通道——channel，可用file channel 也可以用内存channel...
Flume搭建与部署
hahahaxhh的博客
10-15 375
（注意：由于我的tage是用来放压缩包，server用于放解压后的文件，所以具体安装位置请根据你的实际情况进行）执行结果如果想要了解更多flume的知识，可访问https://flume.liyifeng.org。
掌握Flume的安装、配置和简单使用。掌握Sqoop的安装、配置和简单使用。
shuyangpeng的博客
06-08 422
简单使用flume工具 完成通过Avro Source接收外部数据源，数据缓存在memory channel中，然后通过Logger sink将打印出数据，即：avro source --> memory channel --> logger sink 简单使用sqoop工具MySQL与HDFS数据互导 HDFS—导出到–> MySQL
flume简介与安装配置
璃鹿的博客
10-09 508
1 flume简介 flume是分布式的海量日志采集、聚合和传输的系统。从各类数据发送方接收数据进行简单处理后再写到各数据接收方。 配置项名称介绍： a1.sources = r1 r2 a1.channels = c1 c2 a1.sinks = k1 k2 a1：flume节点名称，启动时通过参数命令-name指定。 a1.sources：监听的源，若有多个用空格隔开，用于收集数据...
flume1.6.0安装配置
sum__mer的专栏
09-08 2314
参考连接：https://segmentfault.com/a/1190000002532284，当然最好是参考官方英文文档。 系统环境：centos linux 64位系统，ip:10.34.11.65 安装配置 1、官网下载apache-flume-1.6.0-bin.tar.gz 2、 压缩包上传至/tmp目录，解压缩至/opt/目录 tar -zxvf apache-fl
Apache Flume1.6.0安装与部署
Meiyang1990的博客
06-17 2992
1、官网下载apache-flume-1.6.0-bin.tar.gz   ，解压缩        2、修改apache-flume-1.6.0-bin下面的conf配置目录，新建agent1.properties文件，内容如下：                agent1.channels.ch-1.type = memory                agent1.s
flume安装与配置
08-03
1. 首先，在Flume的安装目录下找到配置文件模板flume-env.sh.template，并将其重命名为flume-env.sh。可以使用命令"mv flume-env.sh.template flume-env.sh"来进行重命名。[1] 2. 解压Flume的压缩包，并进入解压后...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

武念

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值