PySpark shell 修改log4j.properties Spark日志调整
下图是 是PySpark shell 启动时的样子。如果觉得shell 中输出的日志信息过多而使人分心,可以调整日志的级别来控制输出的信息量。你需要在conf 目录下创建一个名为log4j.properties 的文件来管理日志设置。Spark开发者们已经在Spark 中加入了一个日志设置文件的模版,叫作log4j.properties.template。要让日志看起来不那么啰嗦,可以...
原创
2019-05-25 10:21:28 ·
989 阅读 ·
0 评论