spark代码中添加logger_apache-spark – 在Spark Scala应用程序中使用Log4J2进行异步日志记录...

问题:在Spark本地模式下初始化SparkContext后,我无法观察到Log4J2的异步功能.

SBT中的Log4j2依赖项:

"com.lmax" % "disruptor" % "3.3.5",

"org.apache.logging.log4j" % "log4j-api" % "2.8.2",

"org.apache.logging.log4j" % "log4j-core" % "2.8.2",

"org.apache.logging.log4j" %% "log4j-api-scala" % "2.8.2"

Log4j2配置文件:

[%-5level] %d{yyyy-MM-dd HH:mm:ss.SSS} [%t] %c{1} - %msg%n

>

[%-5level] %d{yyyy-MM-dd HH:mm:ss.SSS} [%t] %c{1} - %msg%n

he preceding c

我在IntelliJ中设置了以下系统属性

-DLog4jContextSelector=org.apache.logging.log4j.core.async.AsyncLoggerContextSelector

为了测试异步行为,我在初始化SparkContext之前和之后运行了以下代码片段:

val start = System.nanoTime()

for(i

logger.error("Hello")

}

val end = System.nanoTime()

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值