美文网首页
spark日志输出级别控制

spark日志输出级别控制

作者: emm_simon | 来源:发表于2019-11-24 20:55 被阅读0次

[参考link]
[参考link]

--conf spark.submit.deployMode=cluster \
import org.apache.log4j.{Level, Logger}
//设置打印ERROR及以上级别的日志
Logger.getLogger("org").setLevel(Level.ERROR)
Logger.getLogger("org.apache.spark").setLevel(Level.ERROR)
Logger.getLogger("org.eclipse.jetty.server").setLevel(Level.ERROR)
spark.sparkContext.setLogLevel("ERROR")
//设置打印FATAL及以上级别的日志
Logger.getLogger("org").setLevel(Level.FATAL)
Logger.getLogger("org.apache.spark").setLevel(Level.FATAL)
Logger.getLogger("org.eclipse.jetty.server").setLevel(Level.FATAL)
spark.sparkContext.setLogLevel("FATAL")

世界终于安静了
peace

相关文章

网友评论

      本文标题:spark日志输出级别控制

      本文链接:https://www.haomeiwen.com/subject/iplrwctx.html