Flume(八)Flume1.10及以上版本实现控制台console打印输出

已于 2024-08-07 19:26:41 修改
阅读量235 收藏
点赞数 2
分类专栏： # flume 文章标签： flume java 大数据
于 2024-08-06 09:26:34 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sadfasdfsafadsa/article/details/140945455
版权

Flume控制台不输出日志

原因Flume从1.10版本开始，使用Log4j 2.x替换Log4j 1.x版本，使用log4j2.xml替换log4j.properties。因为日志文件的修改了，即便使用-Dflume.root.logger=INFO,console参数也无法正常在控制台输出数据，只能查看flume.log日志文件中的数据。

那flume1.10及以上版本怎么样才能像以前版本正常在控制台打印输出数据，目前有2种方法可以参考。

第一种方法： 修改log4j2.xml配置文件

路径 /export/software/apache-flume-1.11.0/conf

修改root的logger，引入控制台的appender

薛定谔的猫1981
关注
专栏目录
Docker容器中运行flume及启动不输出运行日志问题
09-30
例如，启动命令可能需要包含类似`flume-ng agent -c /path/to/conf -f /path/to/conf/flume.conf -n app1 -Dflume.root.logger=DEBUG,console`的参数，以便在控制台看到日志。 5. **Dockerfile**：查看Dockerfile，...
flume 启动不输出运行日志
热门推荐
哎幽的成长
10-24 1万+
问题以前碰到的一个问题，算是一个小问题，flume 用命令./flume-ng agent -c /opt/apps/flume/conf -f /opt/apps/flume/conf/syslog_tcp.conf -n a1 -Dflume.root.logger=INFO,console启动的时候，flume使用的log4j不起效，不会输出日志到日志文件。解决在启动时去掉-Dflume.ro
Flume1.10及以上版本实现控制台打印输出
最新发布
三水清来
03-24 1668
flume1.10及以上版本怎么样才能像1.9版本那样正常在控制台打印输出数据呢，目前有2种方法可以参考。
flume启动不了--启动问题不输出日志警告
搞数据
08-08 1万+
[root@yangcl bin]# flume-ng agent -n a1 -c conf -f ../conf/example.conf  -Dflume.root.logger=INFO,console Info: Including Hive libraries found via () for Hive access + exec /usr/java/jdk1.8.0_181/bin...
Flume
getBinary的博客
05-25 443
Flume安装配置运行架构分块配置sourceexecSpooling Directory从Kafka获取数据netcat从指定IP和端口获取数据channelMemoryFileKafkasink存入HDFS存入KafkaNullSink拦截器Interceptor Flume官方文档内容较为简单，可以直接到官网查阅使用方法 安装配置 官方下载地址：http://flume.apache.org/download.html 下载完成后，上传至Linux系统解压 配置项只需要配置一个flume-env.sh
flume教程及配置讲解共23页.pdf.zip
11-19
这个“flume教程及配置讲解共23页.pdf.zip”压缩包文件很可能是提供了一份详尽的Flume学习资料，帮助用户理解和掌握如何在实际环境中配置和使用Flume。 Flume的核心概念主要包括以下几个部分： 1. **Agent**: ...
Flume安装包、安装文档
05-14
1. **下载与解压**：从Apache官方网站下载Flume的最新稳定版本，例如`apache-flume-1.6.0-bin`，将其解压到指定目录。 2. **配置环境变量**：将Flume的bin目录添加到系统的PATH环境变量中，以便于在命令行中直接...
解决flume的shell启停脚本不能正常运行的问题
weixin_43520450的博客
03-11 692
解决flume的shell启停脚本不能正常运行的问题
flume监控文件内容遇到的问题
小萌猿的博客
10-17 3262
在Lamda架构分析日志流水线时用到flume监控日志文件的变化。 开始测试时，用shell脚本模拟的简单日志，单条日志格式为：uid-url-ip 如下为我的shell脚本： #! /bin/bash randnum(){ shuf -i 1-100 -n 1 } randseq(){ head /dev/urandom | tr -dc a-z | head -c 3 } wh...
Flume 打印监控信息到控制台时的 Failed to load class org.slf4j.impl.StaticLoggerBinder问题
a7187593的博客
05-20 655
Failed to load class "org.slf4j.impl.StaticLoggerBinder 在使用Flume监控时有时会需要将监控的信息打印到控制台上，在启动监控时有时会报如下错误 这个问题就是因为项目缺少了org.slf4j.impl.log4j12_1.7.2.jar包，将jar导入到相应的lib文件下就行了，flume就导入到flume/lib下重新启动flume就可以了，如果是在idea中也是同理。 导入jar包后重启就可以发现控制台打印信息正常了： jar包连接即提取码如下
Flume 注意事项
weixin_49820634的博客
07-04 691
flume
Flume 实时收集日志问题
Mrzhangoac的博客
05-10 1197
在写Flume+Kafka实时收集Mapreduce日志时，将原来的INFO级别修改为DEBUG之后，突然发现不能正确输出，此时我的内心是崩溃的，难道说Flume不支持DEBUG级别的日志？下图即是有问题的log4j配置文件： 不信邪的我点开了源码，然后发现源码给的栗子是可以有DEBUG的呀： 追溯到源码，讲真，没看懂，不懂为什么卡住了，以后有时间需要再次深入探究源码，无奈之下
flume day01 （安装+打印内容）
qq_53822083的博客
12-12 267
flume 安装+打印内容
Flume完整实例一：从指定网络端口采集数据输出到控制台
yulutian的博客
06-26 3565
LZ最近在学习Flume（分布式日志收集框架），从简单的例子入手，以供参考 需求：从指定网络端口采集数据输出到控制台 首先要安装Flume，其源码是Java，所以先安装JDK（我装的是1.8），Flume解压配置好环境后，检测flume是否安装成功：在bin目录下，比如：/home/apache-flume-1.6.0-cdh5.7.0-bin/bin 输入：flume-ng version...
Flume:（三）FLUME使用（监听端口输出信息到控制台）
x670667585的博客
11-10 429
打开官网， documentation目录下，user guide setup中的例子拷贝出来修改 FLUME使用主要是写配置文件： 配置Source 配置Channel 配置Sink 串联Source、Chanel、Sink a1:agent的名称 r1：Source的名称 c1：Channel的名称 k1：Sink的名称 # example.conf: A single-no...
Flume使用之监听指定端口并打印到控制台
FlatTiger的博客
02-23 1125
本案例端口监听使用的是netcat，如果使用虚拟机模拟实现，可以先执行yum -y install nc。 自定义flume的配置文件，注意文件名要以.conf结尾。 # 定义agent名字 a1 # 定义sources、channels、sinks 都可以有多个，空格隔开 a1.sources = r1 a1.channels = c1 a1.sinks = k1 # 定义source类型 a1.sources.r1.type = netcat # 绑定source地址 a1.sources.r1.
Ubuntu 16.04下Flume与Kafka安装教程及实战案例
- 在另一个终端运行命令，Flume将读取该文件并将其内容打印出来，确认AvroSource功能正常。 3. **netcatSource案例**: - netcatSource利用网络套接字功能接收数据。 - 在example.conf中配置agent，定义netcat...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

薛定谔的猫1981

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值