spark<log4j配置控制台日志级别输出>

最新推荐文章于 2023-09-15 16:27:41 发布
最新推荐文章于 2023-09-15 16:27:41 发布
阅读量1.1k 收藏
点赞数
分类专栏： spark 文章标签： spark log4j
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/gpwner/article/details/78015830
版权

如果想要输出INFO级别以上的日志做如下配置,在src/main/resources/下新建一个log4j.properties文件，文件中的内容如下：

# Set everything to be logged to the console
log4j.rootCategory=INFO,console
log4j.appender.console=org.apache.log4j.ConsoleAppender
log4j.appender.console.target=System.err
log4j.appender.console.layout=org.apache.log4j.PatternLayout
log4j.appender.console.layout.ConversionPattern=%d{yy/MM/dd HH:mm:ss} %p %c{1}: %m%n

如果要输出WARN级别以上的 日志，则将第一行的INFO修改成WARN即可

Gpwner
关注
专栏目录
log4j设置日志级别
渔翁的快乐
01-20 3750
前几天写了一个ifm_tt_sheet项目，从IFM向铁塔那边发送故障单，可是weblogic自带的jar包webservice中的某个包和我导入的jar包saaj.jar包路径内容完全一致，导致axis.jar一直抛空指针，查了这么多资料实在没有办法，找叶师傅帮忙，叶师傅说这个问题是axis抛的他写的这么多项目也是这样不用管。我想了想也实在没有招，大的环境变量不能动，配置weblogic.xml让
Log4j的日志打印级别理解
tonglei111的博客
11-05 1961
之前对log4j日志打印一直没有在意过，等在自己要用的时候却又似懂非懂的样子，今天特意记录一下； 常用的5种日志级别 按照优先级从高到低排序：FATAL, ERROR、WARN、INFO、DEBUG； 通过在配置文件中定义的级别，您可以控制应用程序打印相应级别的日志信息。比如在配置文件汇设置了INFO级别，则应用程序中所有DEBUG级别的日志信息将不被打印出来。程序会打印高于或等于所设置级别的日志，设置的日志等级越高，打印出来的日志就越少。如果设置级别为INFO，则优先级高于等于INFO级别（如：INFO、
Log4j配置学习--日志级别的生效规则
yangkai100522208的博客
06-27 740
1. Log4j是Apache的一个开源项目，通过使用Log4j，我们可以控制日志信息输送到控制台、文件等；我们也可以控制每一条日志的输出格式；通过定义每一条日志信息的级别，我们能够更加细致地控制日志的生成过程2. Log4j由三个重要的组件构成：日志信息的优先级，日志信息的输出目的地，日志信息的输出格式3. 日志级别：ALL < TRACE < DEBUG < INFO < WARN < ERROR < FATAL < OFF。
【Spark问题记录】抑制spark在控制台输出的日志，使用log4j.properties不生效
RAMBLERS_的博客
09-15 657
由于有部分配置显示的是灰色，所以考虑是文件没有生效，在尝试了将log4j.properties改名到log4j.propertie再改回log4j.properties后发现配置信息都能显示成橙色，再次运行程序，发现日志信息已经不会显示了。但是在文件中，只有前5行是橙色的，其他的都是灰色的，是不是意味着灰色部分的设置没有起作用？为了抑制spark程序运行时在控制台输出的大量日志信息,我在main目录下的resources创建了。
日志输出级别--log4j
weixin_50330651的博客
07-27 177
8种输出级别 （熟记） All < Trace < Debug < Info < Warn < Error < Fatal < Off 规则 比如fbm模块的日志级别设置： <root level="INFO"> <appender-ref ref="STDOUT"/> </root> level=“INFO” ： 说明级别为 Info 、 Warn 、 Error 、 Fatal 、 Off 的日志才
Spark Streaming消费kafka数据为减少控制台输出日志配置log4j.properties不起效的问题
集北卡卡罗特的博客
03-03 804
在使用Spark Streaming消费Kafka数据并处理数据时会在控制台生成大量不太重要的日志，为了减少控制台输出的日志，在使用sparkConf.setLogLevel()方法达不到期望时，想通过配置log4j.properties来实现，遇到了log4j.properties不起效的问题。 当时我的maven项目的Libraries下已经有slf4j、log4j的库，但是pom.xml文件...
Spark log4j 日志配置详解
热门推荐
ZMC921的博客
05-08 1万+
一、spark job日志介绍    spark中提供了log4j的方式记录日志。可以在$SPARK_HOME/conf/下，将 log4j.properties.template 文件copy为 log4j.properties 来启用log4j配置。但这个配置为全局配置，不能单独配置某个job的运行日志。    在Spark的conf目录下，把log4j.properties.template...
Log4j配置文件
TimeQuantum的博客
09-01 1151
SpringBoot配置Log4j2
log4j日志设置error级别以上
IBLiplus的博客
09-07 9063
日志记录器（Logger）的行为是分等级的。分为  - OFF  - FATAL  - WARN  - INFO  - DEBUG  - TRACE  - ALL  Log4j建议只使用四个级别，优先级从高到低分别是ERROR、WARN、INFO、DEBUG。通过在这里定义的级别，您可以控制到应用程序中相应级别的日志信息的开关。  比如在这里定义了INFO级别，则应用程序中所有DEBUG级别的日志...
调整spark-sql控制台日志输出级别
jiezou12138的博客
03-28 5120
问题： 每次spark-sql操作都会打印大量的INFO信息，这样我们查看结果就会很麻烦， 解决： 调整Spark日志级别的配置文件是在$SPARK_HOME/conf/目录下的log4j.properties.template，默认级别是INFO 将log4j.properties.template复制一份 cp log4j.properties.template log4j.pro...
使用log4j.properties解决MR和Spark控制台爆红的问题（不影响代码实现）
Null的博客
08-01 963
1.能解决以下问题 spark程序运行时候如下所示效果 MR车灯徐运行时如下所示效果 2.解决办法 新建一个log4j.properties文件 复制下面的代码 # # # Licensed to the Apache Software Foundation (ASF) under one # or more contributor license agreements. ...
Java中使用log4j进行日志打印，轻松实现日志输出和管理
猿小白的博客
03-28 4159
控制台输出格式为PatternLayout指定的格式，文件输出格式也为PatternLayout指定的格式，文件名为/path/to/log/file.log，文件大小不超过10MB，最多保留10个备份文件。log4j支持将日志输出到不同的目的地，例如控制台、文件、数据库等。在项目的classpath下创建log4j.properties文件，配置日志输出的级别、输出目的地、输出格式等信息。其中，Logger.getLogger()方法的参数为当前类的Class对象，可以保证日志输出的类名和行号正确。
<转> 使用Log4J为项目配置日志输出应用详细总结及示例演示.
01-01 331
Log4j组件构成 Log4j由三个重要的组件构成： 1.日志信息的优先级(Logger) 2.日志信息的输出目的地(Appender) 3.日志信息的输出格式(Layout)。 概要: 日志信息的优先级从高到低有ERROR、WARN、INFO、DEBUG，分别用来指定这条日志信息的重要程度； 日志信息的输出目的地指定了日志将打印到控制台还是文件中； 而输出格式则控制...
spark 程序配置日志级别 通过log4j
chixushuchu的博客
11-11 1273
spark 如何配置日志打印级别 Log4j.properties文件 1、spark自身的打印级别 首先明白如何设置spark本身的日志级别 Edit yourconf/log4j.propertiesfile and change the following line: log4j.rootCategory=INFO, console to log4j.rootCateg...
配置log4j输出在控制台的两种方式
m29848687的博客
03-23 7494
详细参考点这里1.添加依赖架包： log4j-1.2.17.jar 使用properties配置log4j: log4j.appender.encoding = UTF-8 log4j.properties, log4j.rootLogger=DEBUG.Console log4j.appender.Console=org.apach
spark 开发中log4j详解与配置步骤
06-12 8895
1 环境 &lt;properties&gt; &lt;scala.version&gt;2.11.8&lt;/scala.version&gt; &lt;spark.version&gt;2.2.0&lt;/spark.version&gt; &lt;hadoop.version&gt;2.6.0-cdh5.7.0&lt;/hadoop.version&gt;
spark调整日志显示级别
09-05 2200
摘要 在学习使用Spark的过程中，总是想对内部运行过程作深入的了解，其中DEBUG和TRACE级别的日志可以为我们提供详细和有用的信息，那么如何进行合理设置呢，不复杂但也绝不是将一个INFO换为TRACE那么简单。 主要问题 调整Spark日志级别的配置文件是$SPARK_HOME/conf/log4j.properties，默认级别是INFO，如果曾经将其改为DEBUG的朋友可能会有
flume学习（一）：log4j直接输出日志到flume
xiaomin1991222的专栏
06-27 176
log4j.properties配置：log4j.rootLogger=INFOlog4j.category.com.besttone=INFO,flumelog4j.appender.flume = org.apache.flume.clients.log4jappender.Log4jAppenderlog4j.appender.flume.Hostname = localhostlog4j...
解决spark运行时控制台打印冗杂的INFO（屏蔽掉无用的INFO）
qq_40068214的博客
06-13 4254
今天在spark和hive整合完后启动SparkSql的时候控制台打印出了好多冗余的信息看起来特别不爽 就一个 show databases； 却打印出来这么多信息，让我着实不大容易找到我想要的信息呀 解决方案：1. 进入$SPARK_HOME/conf目录下，拷贝一个log4j.properties.template，命名为log4j.properties 修改成功后打印 show...
spark log4j配置无效
最新发布
09-29
spark log4j配置无效可能是由于引用中提到的logback-classic-1.1.11.jar引起的。解决方法可以尝试排除该jar包。另外，可以使用引用中的代码来重置配置和重新加载log4j.properties文件。如果你想修改spark2.3的log4j...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值