spark代码中添加logger_如何在Spark中关闭INFO日志记录？

我使用AWS EC2指南安装了Spark，并且可以使用bin/pyspark脚本很好地启动该程序以到达Spark 提示，并且还可以成功执行快速入门Quide。

但是，我无法终生解决如何INFO在每个命令后停止所有冗长的日志记录。

我在下面的代码(注释掉，设置为OFF)中的几乎所有可能的情况下都尝试了该log4j.properties文件，该conf文件位于我从中以及在每个节点上启动应用程序的文件夹中，没有任何反应。INFO执行每个语句后，我仍然可以打印日志记录语句。

我对应该如何工作感到非常困惑。

#Set everything to be logged to the console log4j.rootCategory=INFO, console

log4j.appender.console=org.apache.log4j.ConsoleAppender

log4j.appender.console.target=System.err

log4j.appender.console.layout=org.apache.log4j.PatternLayout

log4j.appender.console.layout.ConversionPattern=%d{yy/MM/dd HH:mm:ss} %p %c{1}: %m%n

# Settings to quiet third party logs that are too verbose

log4j.logger.org.eclipse.jetty=WARN

log4j.logger.org.apache.spark.repl.SparkIMain$exprTyper=INFO

log4j.logger.org.apache.spark.repl.SparkILoop$SparkIL