windows下flume的配置安装

最新推荐文章于 2024-03-20 10:58:40 发布
最新推荐文章于 2024-03-20 10:58:40 发布
阅读量7.9k 收藏 54
点赞数 5
文章标签： windows flume
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dianchiqq/article/details/124084976
版权

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

windows下flume的配置安装（详细，小白必备）

前言`

大多情况下都是在linux上配置flume，工业4.0的一些场景需要用windows的环境配置。

提示：以下是本篇文章正文内容，下面案例可供参考
在这里插入图片描述

一、下载安装

准备flume的安装包，请在官网进行下载：http://flume.apache.org/download.html
在这里插入图片描述

二、解压到目录，例如D:\software\apache-flume-1.9.0-bin(记住此路径)

三、打开电脑如图点击，新建FLUME_HOME变量，填写flume安装目录D:\software\apache-flume-1.9.0-bin（填写自己的安装目录）

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

四.编辑系统变量path，追加%FLUME_HOME%\conf和%FLUME_HOME%\bin

在这里插入图片描述

在这里插入图片描述

五 复制D:\software\apache-flume-1.9.0-bin\config目录下带有.template的三个文件，复制后去掉.template后缀

在这里插入图片描述

六 配置JAVA_HOME（如果配置过可以跳过步骤6）其中jdk版本必须是1.8以上（下图查看jdk版本）

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

七 7.Win+R输入cmd，进入命令窗口，输入flume-ng version

在这里插入图片描述

配置完成

懂点代码的材料狗
关注
  • 5
    点赞
  • 踩
  • 54
    收藏
    觉得还不错? 一键收藏
  • 7
    评论
在Windows下的flume 安装，部署及和kafka组合使用
hhjdshz的博客
04-06 8014
一，Windows下配置环境变量 此电脑->右键属性->系统->高级系统设置->环境变量 （1） 环境变量名：FLUME_HOME 变量值：就是安装的flume的路径 例如我自己的是：FLUME_HOME；E:\flume\apache-flume-1.9.0-bin （2）在path变量中添加 %FLUME_HOME%\conf;%FLUME_HOME%\bin;然后依次保存我们所做的修改即可。编辑apache-flume-1.9.0-bin\conf 下的flu..
在IDE中启动flume
fany000的博客
02-28 639
上一篇讲到，在windows中通过命令行来运行flumewindos搭建flume，本篇将讲到如何在IDE中启动服务端agent。 查看cmd 首先进入FLUME_HOME\bin，查看 flume-ng.cmd ，会发现只有一行命令： powershell.exe -NoProfile -InputFormat none -ExecutionPolicy unrestricted -File %...
Windows系统安装flume并配置测试
最新发布
qq_43359234的博客
03-20 1411
参数说明：指明conf文件路径、指明conf文件、指定agent、指明log打印信息级别和位置。如果希望在一个agent中接收多个端口的日志信息，可以采用如下配置方式，根据官方文档quickStart，解压文件中打开docs文件夹下的。进行查看，有详细说明（是一个可执行程序，可以调试）配置文件，然后下边的接收tcp日志配置复制到。设置接收多个源，下边配置接收不同源的信息。文件，并记住文件的解压目录，如我的。参数的详细使用可以打开bin目录下的。的三个文件，复制后去掉。在cmd命令行中，输入。
Flume的安装和使用
qq_68383591的博客
05-29 2768
如果启动中提示PathNotFount: java.exe，则需要配置java的环境变量，JAVA_HOME=java的安装路径，在Path中配置%JAVA_HOME%\bin。注意：java的安装路径中尽量不要有空格。Windows系统中有一个目录“E:\bigdataCol\mylogs”，这个目录下不断有新的文件生成，使用Flume采集这个目录下的文件，并把文件内容显示到控制台（屏幕）。（1）在windows中打开telnet服务。切换到flume的bin目录。
在windows中实现Flume日志收集
wpfphp的博客
06-19 2694
一、flume的简介 任何一个系统在运行的时候都会产生大量的日志信息，我们需要对这些日志进行分析，在分析日志之前，我们需要将分散在生产系统中的日志收集起来。Flume就是这样的日志采集系统。 1.主要有三个组件： Source：消费web系统这样的外部数据源中的数据（一般就是web系统产生的日志），外部数据源会向flume发送某种能被flume识别的格式的事件，有以下几种类型：avro 、exec、jms、spooling directory source、kafka、netcat等...
flume入门及在windows环境中启动运行
程序员Monkey的专栏
06-30 3552
最近公司项目需求，要研究flume技术，近段时间研究了一下，给它来做个小小滴总结！ 一、什么是Flume? 　　flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的发行版本目前被统称为 Flume OG（original generation），属于 cloudera。但随着 FLume 功能的扩展，Flume OG 代码工程臃肿、核心组件
Flume学习文档(2){Flume安装部署、Flume配置文件}.docx
07-27
Flume学习文档(2){Flume安装部署、Flume配置文件}。 记录我的学习之旅，每份文档倾心倾力，带我成我大牛，回头观望满脸笑意，望大家多多给予意见，有问题或错误，请联系 我将及时改正；借鉴文章标明出处，谢谢
Flume-ng在windows环境搭建并测试+log4j日志通过Flume输出到HDFS.docx
06-10
在本文中，我们将介绍如何在 Windows 环境下搭建 Flume-ng，并使用 Log4j 将日志输出到 HDFS。 一、Flume-ng 安装与配置 首先，需要下载 Flume-ng 并解压到指定目录。然后，需要设置环境变量，新建 FLUME_HOME ...
flume、Kafka的安装详细步骤与简单案例测试
10-13
- 在Windows系统上下载Flume安装包（例如：apache-flume-1.7.0-bin.tar）。 - 使用FileZilla Client将其传输到Linux虚拟机。 - 解压到指定目录（例如：/usr/local/）。 - 重命名解压后的文件夹为`flume`，并赋予当前...
flume自定义source,sink,intercepor的demo，已经配置好maven插件
08-23
一个简单的工程，已经设置各种配置，直接只用maven打包好就可以在flume工程包新建plugins.d/custom/lib 目录，并拷贝到下面，并将工程里面的conf文件拷贝到flume的conf目录下启动命令 nohup flume-ng agent -n ...
windows下flume1.7使用文档
05-15
在windows端使用flume1.7同步上传数据到hdfs的说明
flume1.9， win10， code.zip
06-29
描述中指出，为了使用这个修改后的版本，你需要将 `code.zip` 解压缩后得到的 `.jar` 文件放置到 Flume 安装目录下的 `lib` 目录中。然后，你可以按照通常的方式启动 Flume，此时 Flume 将会加载这个修改过的 `.jar`...
windows 查找jdk的安装位置
知道这个有什么用？
12-11 1006
它们会自动生成环境变量，此时，在cmd中执行和javac命令，都是可以正常执行了。如下图：明明java和javac都能正常运行，为什么别的软件又打不开了？
Flume(一)：flume安装配置
SingingFisher的博客
12-02 631
版本 本文档及相关的其他flume文档，均基于1.9.0版本的flume 下载 本文档编写时，flume1.9.0下载地址为http://mirrors.tuna.tsinghua.edu.cn/apache/flume/1.9.0/apache-flume-1.9.0-bin.tar.gz 如果链接失效，自行到flume官网下载 安装 安装的路径仅为例子，不是必须 Win10 将flume解...
flume 1.8 在 windows下安装运行
一代键客的博客
06-12 5490
一、安装环境和软件         1、flume 运行需要java环境，所以运行flume之前必须安装并配置java环境（如果安装了jdk，但是没有配置jdk环境，运行 flume 时会抛出找不见 java.exe 的错误）。     2、flume 1.8 需要 java运行时环境java 1.8或更高。     3、下载 flume 1.8 ，下载地址；因为下载flume 是 tar.gz，...
Windows上搭建Flume运行环境
架构师的成长之路的博客
05-10 2316
Windows上搭建Flume运行环境更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记kafka storm 实战 (干货)一、概述1、先安装JDK2、下载官方下载地址 官方用户手册http://www...
flume-1.8.0在Windows系统中的安装与使用
hck369258的博客
03-16 2552
一、环境       本文主要是常用服务器下运行Flume，因此环境为Windows server 2008+jdk1.8+flume1.8 二、安装       jdk的安装与环境变量的配置这里不再赘述，flume的下载进入官网http://flume.apache.org/，解压下载文件至Flume的安装目录即可。       配置环境变量FLUME_HOME=你安装的flume的路径，例如我...
window下安装flume
陈晓婵
11-21 3131
本教程是在已经安装了jdk1.8以后的基础上进行的操作. 1.登陆官网http://flume.apache.org/download.html下载apache-flume-1.8.0-bin.tar.gz 2.解压apache-flume-1.8.0-bin.tar.gz 3.在conf文件夹中新建example.conf文件 # example.conf: A single-node
flume在windows10上运行
wateryouyo的博客
08-26 8627
1. 直接下载官网flume1.8，解压到本地F盘 2. 在conf目录下复制flume-env.ps1.template改为flume-env.ps1，改下FLUME_CLASSPATH    $FLUME_CLASSPATH="F:\kafka\apache-flume-1.8.0-bin\lib"   flume-env.sh操作同上 3.检查安装是否成功：  bin\flume-...
windows下安装flume
05-13
以下是在Windows上安装Flume的步骤： 1. 首先，从Apache Flume官方网站下载最新的版本，例如：http://flume.apache.org/download.html。 2. 解压缩下载的文件，例如：apache-flume-1.9.0-bin.tar.gz。 3. 确保Java已安装并配置好了环境变量。你可以在命令行输入“java -version”来检查Java是否已正确安装。 4. 在Flume的安装目录下，创建一个新的文件夹，例如：C:\flume\conf。 5. 在C:\flume\conf目录下，创建一个新的配置文件flume.conf，用于配置Flume的Agent。 6. 编辑flume.conf文件，配置Flume Agent的输入、输出和通道。例如： ``` agent.sources = source1 agent.channels = channel1 agent.sinks = sink1 agent.sources.source1.type = netcat agent.sources.source1.bind = localhost agent.sources.source1.port = 44444 agent.channels.channel1.type = memory agent.sinks.sink1.type = logger agent.sinks.sink1.channel = channel1 ``` 7. 在命令行中，导航到Flume的安装目录，例如：C:\flume。 8. 执行以下命令启动Flume Agent： ``` bin/flume-ng agent -n agent -c conf -f conf/flume.conf -Dflume.root.logger=INFO,console ``` 9. Flume将启动并开始监听端口44444上的事件。在命令行中输入文本行，Flume将输出相应的日志消息。 这样，你就成功地在Windows上安装和配置了Flume。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值